ca0c177d47152e7aa861eee264d5ad4ed5c5703b
[oweals/busybox.git] / archival / gzip.c
1 /* vi: set sw=4 ts=4: */
2 /*
3  * Gzip implementation for busybox
4  *
5  * Based on GNU gzip Copyright (C) 1992-1993 Jean-loup Gailly.
6  *
7  * Originally adjusted for busybox by Charles P. Wright <cpw@unix.asb.com>
8  *              "this is a stripped down version of gzip I put into busybox, it does
9  *              only standard in to standard out with -9 compression.  It also requires
10  *              the zcat module for some important functions."
11  *
12  * Adjusted further by Erik Andersen <andersen@lineo.com>, <andersee@debian.org>
13  * to support files as well as stdin/stdout, and to generally behave itself wrt
14  * command line handling.
15  *
16  * This program is free software; you can redistribute it and/or modify
17  * it under the terms of the GNU General Public License as published by
18  * the Free Software Foundation; either version 2 of the License, or
19  * (at your option) any later version.
20  *
21  * This program is distributed in the hope that it will be useful,
22  * but WITHOUT ANY WARRANTY; without even the implied warranty of
23  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE. See the GNU
24  * General Public License for more details.
25  *
26  * You should have received a copy of the GNU General Public License
27  * along with this program; if not, write to the Free Software
28  * Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA 02111-1307 USA
29  *
30  */
31
32 #include "busybox.h"
33 #define BB_DECLARE_EXTERN
34 #define bb_need_memory_exhausted
35 #include "messages.c"
36
37 /* These defines are very important for BusyBox.  Without these,
38  * huge chunks of ram are pre-allocated making the BusyBox bss 
39  * size Freaking Huge(tm), which is a bad thing.*/
40 #define SMALL_MEM
41 #define DYN_ALLOC
42
43 /* I don't like nested includes, but the string and io functions are used
44  * too often
45  */
46 #include <stdio.h>
47 #include <string.h>
48 #define memzero(s, n)     memset ((void *)(s), 0, (n))
49
50 #ifndef RETSIGTYPE
51 #  define RETSIGTYPE void
52 #endif
53
54 #define local static
55
56 typedef unsigned char uch;
57 typedef unsigned short ush;
58 typedef unsigned long ulg;
59
60 /* Return codes from gzip */
61 #define OK      0
62 #define ERROR   1
63 #define WARNING 2
64
65 /* Compression methods (see algorithm.doc) */
66 #define STORED      0
67 #define COMPRESSED  1
68 #define PACKED      2
69 #define LZHED       3
70 /* methods 4 to 7 reserved */
71 #define DEFLATED    8
72 #define MAX_METHODS 9
73 extern int method;                              /* compression method */
74
75 /* To save memory for 16 bit systems, some arrays are overlaid between
76  * the various modules:
77  * deflate:  prev+head   window      d_buf  l_buf  outbuf
78  * unlzw:    tab_prefix  tab_suffix  stack  inbuf  outbuf
79  * inflate:              window             inbuf
80  * unpack:               window             inbuf  prefix_len
81  * unlzh:    left+right  window      c_table inbuf c_len
82  * For compression, input is done in window[]. For decompression, output
83  * is done in window except for unlzw.
84  */
85
86 #ifndef INBUFSIZ
87 #  ifdef SMALL_MEM
88 #    define INBUFSIZ  0x2000    /* input buffer size */
89 #  else
90 #    define INBUFSIZ  0x8000    /* input buffer size */
91 #  endif
92 #endif
93 #define INBUF_EXTRA  64                 /* required by unlzw() */
94
95 #ifndef OUTBUFSIZ
96 #  ifdef SMALL_MEM
97 #    define OUTBUFSIZ   8192    /* output buffer size */
98 #  else
99 #    define OUTBUFSIZ  16384    /* output buffer size */
100 #  endif
101 #endif
102 #define OUTBUF_EXTRA 2048               /* required by unlzw() */
103
104 #ifndef DIST_BUFSIZE
105 #  ifdef SMALL_MEM
106 #    define DIST_BUFSIZE 0x2000 /* buffer for distances, see trees.c */
107 #  else
108 #    define DIST_BUFSIZE 0x8000 /* buffer for distances, see trees.c */
109 #  endif
110 #endif
111
112 #ifdef DYN_ALLOC
113 #  define EXTERN(type, array)  extern type * array
114 #  define DECLARE(type, array, size)  type * array
115 #  define ALLOC(type, array, size) { \
116       array = (type*)calloc((size_t)(((size)+1L)/2), 2*sizeof(type)); \
117       if (array == NULL) error_msg(memory_exhausted); \
118    }
119 #  define FREE(array) {if (array != NULL) free(array), array=NULL;}
120 #else
121 #  define EXTERN(type, array)  extern type array[]
122 #  define DECLARE(type, array, size)  type array[size]
123 #  define ALLOC(type, array, size)
124 #  define FREE(array)
125 #endif
126
127 EXTERN(uch, inbuf);                             /* input buffer */
128 EXTERN(uch, outbuf);                    /* output buffer */
129 EXTERN(ush, d_buf);                             /* buffer for distances, see trees.c */
130 EXTERN(uch, window);                    /* Sliding window and suffix table (unlzw) */
131 #define tab_suffix window
132 #ifndef MAXSEG_64K
133 #  define tab_prefix prev               /* hash link (see deflate.c) */
134 #  define head (prev+WSIZE)             /* hash head (see deflate.c) */
135 EXTERN(ush, tab_prefix);                /* prefix code (see unlzw.c) */
136 #else
137 #  define tab_prefix0 prev
138 #  define head tab_prefix1
139 EXTERN(ush, tab_prefix0);               /* prefix for even codes */
140 EXTERN(ush, tab_prefix1);               /* prefix for odd  codes */
141 #endif
142
143 extern unsigned insize;                 /* valid bytes in inbuf */
144 extern unsigned inptr;                  /* index of next byte to be processed in inbuf */
145 extern unsigned outcnt;                 /* bytes in output buffer */
146
147 extern long bytes_in;                   /* number of input bytes */
148 extern long bytes_out;                  /* number of output bytes */
149 extern long header_bytes;               /* number of bytes in gzip header */
150
151 #define isize bytes_in
152 /* for compatibility with old zip sources (to be cleaned) */
153
154 extern int ifd;                                 /* input file descriptor */
155 extern int ofd;                                 /* output file descriptor */
156 extern char ifname[];                   /* input file name or "stdin" */
157 extern char ofname[];                   /* output file name or "stdout" */
158 extern char *progname;                  /* program name */
159
160 extern long time_stamp;                 /* original time stamp (modification time) */
161 extern long ifile_size;                 /* input file size, -1 for devices (debug only) */
162
163 typedef int file_t;                             /* Do not use stdio */
164
165 #define NO_FILE  (-1)                   /* in memory compression */
166
167
168 #define PACK_MAGIC     "\037\036"       /* Magic header for packed files */
169 #define GZIP_MAGIC     "\037\213"       /* Magic header for gzip files, 1F 8B */
170 #define OLD_GZIP_MAGIC "\037\236"       /* Magic header for gzip 0.5 = freeze 1.x */
171 #define LZH_MAGIC      "\037\240"       /* Magic header for SCO LZH Compress files */
172 #define PKZIP_MAGIC    "\120\113\003\004"       /* Magic header for pkzip files */
173
174 /* gzip flag byte */
175 #define ASCII_FLAG   0x01               /* bit 0 set: file probably ascii text */
176 #define CONTINUATION 0x02               /* bit 1 set: continuation of multi-part gzip file */
177 #define EXTRA_FIELD  0x04               /* bit 2 set: extra field present */
178 #define ORIG_NAME    0x08               /* bit 3 set: original file name present */
179 #define COMMENT      0x10               /* bit 4 set: file comment present */
180 #define ENCRYPTED    0x20               /* bit 5 set: file is encrypted */
181 #define RESERVED     0xC0               /* bit 6,7:   reserved */
182
183 /* internal file attribute */
184 #define UNKNOWN 0xffff
185 #define BINARY  0
186 #define ASCII   1
187
188 #ifndef WSIZE
189 #  define WSIZE 0x8000                  /* window size--must be a power of two, and */
190 #endif                                                  /*  at least 32K for zip's deflate method */
191
192 #define MIN_MATCH  3
193 #define MAX_MATCH  258
194 /* The minimum and maximum match lengths */
195
196 #define MIN_LOOKAHEAD (MAX_MATCH+MIN_MATCH+1)
197 /* Minimum amount of lookahead, except at the end of the input file.
198  * See deflate.c for comments about the MIN_MATCH+1.
199  */
200
201 #define MAX_DIST  (WSIZE-MIN_LOOKAHEAD)
202 /* In order to simplify the code, particularly on 16 bit machines, match
203  * distances are limited to MAX_DIST instead of WSIZE.
204  */
205
206 extern int decrypt;                             /* flag to turn on decryption */
207 extern int exit_code;                   /* program exit code */
208 extern int verbose;                             /* be verbose (-v) */
209 extern int quiet;                               /* be quiet (-q) */
210 extern int test;                                /* check .z file integrity */
211 extern int save_orig_name;              /* set if original name must be saved */
212
213 #define get_byte()  (inptr < insize ? inbuf[inptr++] : fill_inbuf(0))
214 #define try_byte()  (inptr < insize ? inbuf[inptr++] : fill_inbuf(1))
215
216 /* put_byte is used for the compressed output, put_ubyte for the
217  * uncompressed output. However unlzw() uses window for its
218  * suffix table instead of its output buffer, so it does not use put_ubyte
219  * (to be cleaned up).
220  */
221 #define put_byte(c) {outbuf[outcnt++]=(uch)(c); if (outcnt==OUTBUFSIZ)\
222    flush_outbuf();}
223 #define put_ubyte(c) {window[outcnt++]=(uch)(c); if (outcnt==WSIZE)\
224    flush_window();}
225
226 /* Output a 16 bit value, lsb first */
227 #define put_short(w) \
228 { if (outcnt < OUTBUFSIZ-2) { \
229     outbuf[outcnt++] = (uch) ((w) & 0xff); \
230     outbuf[outcnt++] = (uch) ((ush)(w) >> 8); \
231   } else { \
232     put_byte((uch)((w) & 0xff)); \
233     put_byte((uch)((ush)(w) >> 8)); \
234   } \
235 }
236
237 /* Output a 32 bit value to the bit stream, lsb first */
238 #define put_long(n) { \
239     put_short((n) & 0xffff); \
240     put_short(((ulg)(n)) >> 16); \
241 }
242
243 #define seekable()    0                 /* force sequential output */
244 #define translate_eol 0                 /* no option -a yet */
245
246 #define tolow(c)  (isupper(c) ? (c)-'A'+'a' : (c))      /* force to lower case */
247
248 /* Macros for getting two-byte and four-byte header values */
249 #define SH(p) ((ush)(uch)((p)[0]) | ((ush)(uch)((p)[1]) << 8))
250 #define LG(p) ((ulg)(SH(p)) | ((ulg)(SH((p)+2)) << 16))
251
252 /* Diagnostic functions */
253 #ifdef DEBUG
254 #  define Assert(cond,msg) {if(!(cond)) error_msg(msg);}
255 #  define Trace(x) fprintf x
256 #  define Tracev(x) {if (verbose) fprintf x ;}
257 #  define Tracevv(x) {if (verbose>1) fprintf x ;}
258 #  define Tracec(c,x) {if (verbose && (c)) fprintf x ;}
259 #  define Tracecv(c,x) {if (verbose>1 && (c)) fprintf x ;}
260 #else
261 #  define Assert(cond,msg)
262 #  define Trace(x)
263 #  define Tracev(x)
264 #  define Tracevv(x)
265 #  define Tracec(c,x)
266 #  define Tracecv(c,x)
267 #endif
268
269 #define WARN(msg) {if (!quiet) fprintf msg ; \
270                    if (exit_code == OK) exit_code = WARNING;}
271
272
273         /* in zip.c: */
274 extern int zip (int in, int out);
275 extern int file_read (char *buf, unsigned size);
276
277         /* in unzip.c */
278 extern int unzip (int in, int out);
279 extern int check_zipfile (int in);
280
281         /* in unpack.c */
282 extern int unpack (int in, int out);
283
284         /* in unlzh.c */
285 extern int unlzh (int in, int out);
286
287         /* in gzip.c */
288 RETSIGTYPE abort_gzip (void);
289
290                 /* in deflate.c */
291 void lm_init (ush * flags);
292 ulg deflate (void);
293
294                 /* in trees.c */
295 void ct_init (ush * attr, int *method);
296 int ct_tally (int dist, int lc);
297 ulg flush_block (char *buf, ulg stored_len, int eof);
298
299                 /* in bits.c */
300 void bi_init (file_t zipfile);
301 void send_bits (int value, int length);
302 unsigned bi_reverse (unsigned value, int length);
303 void bi_windup (void);
304 void copy_block (char *buf, unsigned len, int header);
305 extern int (*read_buf) (char *buf, unsigned size);
306
307         /* in util.c: */
308 extern int copy (int in, int out);
309 extern ulg updcrc (uch * s, unsigned n);
310 extern void clear_bufs (void);
311 extern int fill_inbuf (int eof_ok);
312 extern void flush_outbuf (void);
313 extern void flush_window (void);
314 extern void write_buf (int fd, void * buf, unsigned cnt);
315 extern char *strlwr (char *s);
316 extern char *add_envopt (int *argcp, char ***argvp, char *env);
317 extern void read_error_msg (void);
318 extern void write_error_msg (void);
319 extern void display_ratio (long num, long den, FILE * file);
320
321         /* in inflate.c */
322 extern int inflate (void);
323
324 /* lzw.h -- define the lzw functions.
325  * Copyright (C) 1992-1993 Jean-loup Gailly.
326  * This is free software; you can redistribute it and/or modify it under the
327  * terms of the GNU General Public License, see the file COPYING.
328  */
329
330 #if !defined(OF) && defined(lint)
331 #  include "gzip.h"
332 #endif
333
334 #ifndef BITS
335 #  define BITS 16
336 #endif
337 #define INIT_BITS 9                             /* Initial number of bits per code */
338
339 #define BIT_MASK    0x1f                /* Mask for 'number of compression bits' */
340 /* Mask 0x20 is reserved to mean a fourth header byte, and 0x40 is free.
341  * It's a pity that old uncompress does not check bit 0x20. That makes
342  * extension of the format actually undesirable because old compress
343  * would just crash on the new format instead of giving a meaningful
344  * error message. It does check the number of bits, but it's more
345  * helpful to say "unsupported format, get a new version" than
346  * "can only handle 16 bits".
347  */
348
349 #define BLOCK_MODE  0x80
350 /* Block compression: if table is full and compression rate is dropping,
351  * clear the dictionary.
352  */
353
354 #define LZW_RESERVED 0x60               /* reserved bits */
355
356 #define CLEAR  256                              /* flush the dictionary */
357 #define FIRST  (CLEAR+1)                /* first free entry */
358
359 extern int maxbits;                             /* max bits per code for LZW */
360 extern int block_mode;                  /* block compress mode -C compatible with 2.0 */
361
362 /* revision.h -- define the version number
363  * Copyright (C) 1992-1993 Jean-loup Gailly.
364  * This is free software; you can redistribute it and/or modify it under the
365  * terms of the GNU General Public License, see the file COPYING.
366  */
367
368 #define VERSION "1.2.4"
369 #define PATCHLEVEL 0
370 #define REVDATE "18 Aug 93"
371
372 /* This version does not support compression into old compress format: */
373 #ifdef LZW
374 #  undef LZW
375 #endif
376
377 /* tailor.h -- target dependent definitions
378  * Copyright (C) 1992-1993 Jean-loup Gailly.
379  * This is free software; you can redistribute it and/or modify it under the
380  * terms of the GNU General Public License, see the file COPYING.
381  */
382
383 /* The target dependent definitions should be defined here only.
384  * The target dependent functions should be defined in tailor.c.
385  */
386
387
388 #if defined(__MSDOS__) && !defined(MSDOS)
389 #  define MSDOS
390 #endif
391
392 #if defined(__OS2__) && !defined(OS2)
393 #  define OS2
394 #endif
395
396 #if defined(OS2) && defined(MSDOS)      /* MS C under OS/2 */
397 #  undef MSDOS
398 #endif
399
400 #ifdef MSDOS
401 #  ifdef __GNUC__
402          /* DJGPP version 1.09+ on MS-DOS.
403           * The DJGPP 1.09 stat() function must be upgraded before gzip will
404           * fully work.
405           * No need for DIRENT, since <unistd.h> defines POSIX_SOURCE which
406           * implies DIRENT.
407           */
408 #    define near
409 #  else
410 #    define MAXSEG_64K
411 #    ifdef __TURBOC__
412 #      define NO_OFF_T
413 #      ifdef __BORLANDC__
414 #        define DIRENT
415 #      else
416 #        define NO_UTIME
417 #      endif
418 #    else                                               /* MSC */
419 #      define HAVE_SYS_UTIME_H
420 #      define NO_UTIME_H
421 #    endif
422 #  endif
423 #  define PATH_SEP2 '\\'
424 #  define PATH_SEP3 ':'
425 #  define MAX_PATH_LEN  128
426 #  define NO_MULTIPLE_DOTS
427 #  define MAX_EXT_CHARS 3
428 #  define Z_SUFFIX "z"
429 #  define NO_CHOWN
430 #  define PROTO
431 #  define STDC_HEADERS
432 #  define NO_SIZE_CHECK
433 #  define casemap(c) tolow(c)   /* Force file names to lower case */
434 #  include <io.h>
435 #  define OS_CODE  0x00
436 #  define SET_BINARY_MODE(fd) setmode(fd, O_BINARY)
437 #  if !defined(NO_ASM) && !defined(ASMV)
438 #    define ASMV
439 #  endif
440 #else
441 #  define near
442 #endif
443
444 #ifdef OS2
445 #  define PATH_SEP2 '\\'
446 #  define PATH_SEP3 ':'
447 #  define MAX_PATH_LEN  260
448 #  ifdef OS2FAT
449 #    define NO_MULTIPLE_DOTS
450 #    define MAX_EXT_CHARS 3
451 #    define Z_SUFFIX "z"
452 #    define casemap(c) tolow(c)
453 #  endif
454 #  define NO_CHOWN
455 #  define PROTO
456 #  define STDC_HEADERS
457 #  include <io.h>
458 #  define OS_CODE  0x06
459 #  define SET_BINARY_MODE(fd) setmode(fd, O_BINARY)
460 #  ifdef _MSC_VER
461 #    define HAVE_SYS_UTIME_H
462 #    define NO_UTIME_H
463 #    define MAXSEG_64K
464 #    undef near
465 #    define near _near
466 #  endif
467 #  ifdef __EMX__
468 #    define HAVE_SYS_UTIME_H
469 #    define NO_UTIME_H
470 #    define DIRENT
471 #    define EXPAND(argc,argv) \
472        {_response(&argc, &argv); _wildcard(&argc, &argv);}
473 #  endif
474 #  ifdef __BORLANDC__
475 #    define DIRENT
476 #  endif
477 #  ifdef __ZTC__
478 #    define NO_DIR
479 #    define NO_UTIME_H
480 #    include <dos.h>
481 #    define EXPAND(argc,argv) \
482        {response_expand(&argc, &argv);}
483 #  endif
484 #endif
485
486 #ifdef WIN32                                    /* Windows NT */
487 #  define HAVE_SYS_UTIME_H
488 #  define NO_UTIME_H
489 #  define PATH_SEP2 '\\'
490 #  define PATH_SEP3 ':'
491 #  define MAX_PATH_LEN  260
492 #  define NO_CHOWN
493 #  define PROTO
494 #  define STDC_HEADERS
495 #  define SET_BINARY_MODE(fd) setmode(fd, O_BINARY)
496 #  include <io.h>
497 #  include <malloc.h>
498 #  ifdef NTFAT
499 #    define NO_MULTIPLE_DOTS
500 #    define MAX_EXT_CHARS 3
501 #    define Z_SUFFIX "z"
502 #    define casemap(c) tolow(c) /* Force file names to lower case */
503 #  endif
504 #  define OS_CODE  0x0b
505 #endif
506
507 #ifdef MSDOS
508 #  ifdef __TURBOC__
509 #    include <alloc.h>
510 #    define DYN_ALLOC
511          /* Turbo C 2.0 does not accept static allocations of large arrays */
512 void *fcalloc(unsigned items, unsigned size);
513 void fcfree(void *ptr);
514 #  else                                                 /* MSC */
515 #    include <malloc.h>
516 #    define fcalloc(nitems,itemsize) halloc((long)(nitems),(itemsize))
517 #    define fcfree(ptr) hfree(ptr)
518 #  endif
519 #else
520 #  ifdef MAXSEG_64K
521 #    define fcalloc(items,size) calloc((items),(size))
522 #  else
523 #    define fcalloc(items,size) malloc((size_t)(items)*(size_t)(size))
524 #  endif
525 #  define fcfree(ptr) free(ptr)
526 #endif
527
528 #if defined(VAXC) || defined(VMS)
529 #  define PATH_SEP ']'
530 #  define PATH_SEP2 ':'
531 #  define SUFFIX_SEP ';'
532 #  define NO_MULTIPLE_DOTS
533 #  define Z_SUFFIX "-gz"
534 #  define RECORD_IO 1
535 #  define casemap(c) tolow(c)
536 #  define OS_CODE  0x02
537 #  define OPTIONS_VAR "GZIP_OPT"
538 #  define STDC_HEADERS
539 #  define NO_UTIME
540 #  define EXPAND(argc,argv) vms_expand_args(&argc,&argv);
541 #  include <file.h>
542 #  define unlink delete
543 #  ifdef VAXC
544 #    define NO_FCNTL_H
545 #    include <unixio.h>
546 #  endif
547 #endif
548
549 #ifdef AMIGA
550 #  define PATH_SEP2 ':'
551 #  define STDC_HEADERS
552 #  define OS_CODE  0x01
553 #  define ASMV
554 #  ifdef __GNUC__
555 #    define DIRENT
556 #    define HAVE_UNISTD_H
557 #  else                                                 /* SASC */
558 #    define NO_STDIN_FSTAT
559 #    define SYSDIR
560 #    define NO_SYMLINK
561 #    define NO_CHOWN
562 #    define NO_FCNTL_H
563 #    include <fcntl.h>                  /* for read() and write() */
564 #    define direct dirent
565 extern void _expand_args(int *argc, char ***argv);
566
567 #    define EXPAND(argc,argv) _expand_args(&argc,&argv);
568 #    undef  O_BINARY                    /* disable useless --ascii option */
569 #  endif
570 #endif
571
572 #if defined(ATARI) || defined(atarist)
573 #  ifndef STDC_HEADERS
574 #    define STDC_HEADERS
575 #    define HAVE_UNISTD_H
576 #    define DIRENT
577 #  endif
578 #  define ASMV
579 #  define OS_CODE  0x05
580 #  ifdef TOSFS
581 #    define PATH_SEP2 '\\'
582 #    define PATH_SEP3 ':'
583 #    define MAX_PATH_LEN  128
584 #    define NO_MULTIPLE_DOTS
585 #    define MAX_EXT_CHARS 3
586 #    define Z_SUFFIX "z"
587 #    define NO_CHOWN
588 #    define casemap(c) tolow(c) /* Force file names to lower case */
589 #    define NO_SYMLINK
590 #  endif
591 #endif
592
593 #ifdef MACOS
594 #  define PATH_SEP ':'
595 #  define DYN_ALLOC
596 #  define PROTO
597 #  define NO_STDIN_FSTAT
598 #  define NO_CHOWN
599 #  define NO_UTIME
600 #  define chmod(file, mode) (0)
601 #  define OPEN(name, flags, mode) open(name, flags)
602 #  define OS_CODE  0x07
603 #  ifdef MPW
604 #    define isatty(fd) ((fd) <= 2)
605 #  endif
606 #endif
607
608 #ifdef __50SERIES                               /* Prime/PRIMOS */
609 #  define PATH_SEP '>'
610 #  define STDC_HEADERS
611 #  define NO_MEMORY_H
612 #  define NO_UTIME_H
613 #  define NO_UTIME
614 #  define NO_CHOWN
615 #  define NO_STDIN_FSTAT
616 #  define NO_SIZE_CHECK
617 #  define NO_SYMLINK
618 #  define RECORD_IO  1
619 #  define casemap(c)  tolow(c)  /* Force file names to lower case */
620 #  define put_char(c) put_byte((c) & 0x7F)
621 #  define get_char(c) ascii2pascii(get_byte())
622 #  define OS_CODE  0x0F                 /* temporary, subject to change */
623 #  ifdef SIGTERM
624 #    undef SIGTERM                              /* We don't want a signal handler for SIGTERM */
625 #  endif
626 #endif
627
628 #if defined(pyr) && !defined(NOMEMCPY)  /* Pyramid */
629 #  define NOMEMCPY                              /* problem with overlapping copies */
630 #endif
631
632 #ifdef TOPS20
633 #  define OS_CODE  0x0a
634 #endif
635
636 #ifndef unix
637 #  define NO_ST_INO                             /* don't rely on inode numbers */
638 #endif
639
640
641         /* Common defaults */
642
643 #ifndef OS_CODE
644 #  define OS_CODE  0x03                 /* assume Unix */
645 #endif
646
647 #ifndef PATH_SEP
648 #  define PATH_SEP '/'
649 #endif
650
651 #ifndef casemap
652 #  define casemap(c) (c)
653 #endif
654
655 #ifndef OPTIONS_VAR
656 #  define OPTIONS_VAR "GZIP"
657 #endif
658
659 #ifndef Z_SUFFIX
660 #  define Z_SUFFIX ".gz"
661 #endif
662
663 #ifdef MAX_EXT_CHARS
664 #  define MAX_SUFFIX  MAX_EXT_CHARS
665 #else
666 #  define MAX_SUFFIX  30
667 #endif
668
669 #ifndef MAKE_LEGAL_NAME
670 #  ifdef NO_MULTIPLE_DOTS
671 #    define MAKE_LEGAL_NAME(name)   make_simple_name(name)
672 #  else
673 #    define MAKE_LEGAL_NAME(name)
674 #  endif
675 #endif
676
677 #ifndef MIN_PART
678 #  define MIN_PART 3
679    /* keep at least MIN_PART chars between dots in a file name. */
680 #endif
681
682 #ifndef EXPAND
683 #  define EXPAND(argc,argv)
684 #endif
685
686 #ifndef RECORD_IO
687 #  define RECORD_IO 0
688 #endif
689
690 #ifndef SET_BINARY_MODE
691 #  define SET_BINARY_MODE(fd)
692 #endif
693
694 #ifndef OPEN
695 #  define OPEN(name, flags, mode) open(name, flags, mode)
696 #endif
697
698 #ifndef get_char
699 #  define get_char() get_byte()
700 #endif
701
702 #ifndef put_char
703 #  define put_char(c) put_byte(c)
704 #endif
705 /* bits.c -- output variable-length bit strings
706  * Copyright (C) 1992-1993 Jean-loup Gailly
707  * This is free software; you can redistribute it and/or modify it under the
708  * terms of the GNU General Public License, see the file COPYING.
709  */
710
711
712 /*
713  *  PURPOSE
714  *
715  *      Output variable-length bit strings. Compression can be done
716  *      to a file or to memory. (The latter is not supported in this version.)
717  *
718  *  DISCUSSION
719  *
720  *      The PKZIP "deflate" file format interprets compressed file data
721  *      as a sequence of bits.  Multi-bit strings in the file may cross
722  *      byte boundaries without restriction.
723  *
724  *      The first bit of each byte is the low-order bit.
725  *
726  *      The routines in this file allow a variable-length bit value to
727  *      be output right-to-left (useful for literal values). For
728  *      left-to-right output (useful for code strings from the tree routines),
729  *      the bits must have been reversed first with bi_reverse().
730  *
731  *      For in-memory compression, the compressed bit stream goes directly
732  *      into the requested output buffer. The input data is read in blocks
733  *      by the mem_read() function. The buffer is limited to 64K on 16 bit
734  *      machines.
735  *
736  *  INTERFACE
737  *
738  *      void bi_init (FILE *zipfile)
739  *          Initialize the bit string routines.
740  *
741  *      void send_bits (int value, int length)
742  *          Write out a bit string, taking the source bits right to
743  *          left.
744  *
745  *      int bi_reverse (int value, int length)
746  *          Reverse the bits of a bit string, taking the source bits left to
747  *          right and emitting them right to left.
748  *
749  *      void bi_windup (void)
750  *          Write out any remaining bits in an incomplete byte.
751  *
752  *      void copy_block(char *buf, unsigned len, int header)
753  *          Copy a stored block to the zip file, storing first the length and
754  *          its one's complement if requested.
755  *
756  */
757
758 #ifdef DEBUG
759 #  include <stdio.h>
760 #endif
761
762 /* ===========================================================================
763  * Local data used by the "bit string" routines.
764  */
765
766 local file_t zfile;                             /* output gzip file */
767
768 local unsigned short bi_buf;
769
770 /* Output buffer. bits are inserted starting at the bottom (least significant
771  * bits).
772  */
773
774 #define Buf_size (8 * 2*sizeof(char))
775 /* Number of bits used within bi_buf. (bi_buf might be implemented on
776  * more than 16 bits on some systems.)
777  */
778
779 local int bi_valid;
780
781 /* Number of valid bits in bi_buf.  All bits above the last valid bit
782  * are always zero.
783  */
784
785 int (*read_buf) (char *buf, unsigned size);
786
787 /* Current input function. Set to mem_read for in-memory compression */
788
789 #ifdef DEBUG
790 ulg bits_sent;                                  /* bit length of the compressed data */
791 #endif
792
793 /* ===========================================================================
794  * Initialize the bit string routines.
795  */
796 void bi_init(zipfile)
797 file_t zipfile;                                 /* output zip file, NO_FILE for in-memory compression */
798 {
799         zfile = zipfile;
800         bi_buf = 0;
801         bi_valid = 0;
802 #ifdef DEBUG
803         bits_sent = 0L;
804 #endif
805
806         /* Set the defaults for file compression. They are set by memcompress
807          * for in-memory compression.
808          */
809         if (zfile != NO_FILE) {
810                 read_buf = file_read;
811         }
812 }
813
814 /* ===========================================================================
815  * Send a value on a given number of bits.
816  * IN assertion: length <= 16 and value fits in length bits.
817  */
818 void send_bits(value, length)
819 int value;                                              /* value to send */
820 int length;                                             /* number of bits */
821 {
822 #ifdef DEBUG
823         Tracev((stderr, " l %2d v %4x ", length, value));
824         Assert(length > 0 && length <= 15, "invalid length");
825         bits_sent += (ulg) length;
826 #endif
827         /* If not enough room in bi_buf, use (valid) bits from bi_buf and
828          * (16 - bi_valid) bits from value, leaving (width - (16-bi_valid))
829          * unused bits in value.
830          */
831         if (bi_valid > (int) Buf_size - length) {
832                 bi_buf |= (value << bi_valid);
833                 put_short(bi_buf);
834                 bi_buf = (ush) value >> (Buf_size - bi_valid);
835                 bi_valid += length - Buf_size;
836         } else {
837                 bi_buf |= value << bi_valid;
838                 bi_valid += length;
839         }
840 }
841
842 /* ===========================================================================
843  * Reverse the first len bits of a code, using straightforward code (a faster
844  * method would use a table)
845  * IN assertion: 1 <= len <= 15
846  */
847 unsigned bi_reverse(code, len)
848 unsigned code;                                  /* the value to invert */
849 int len;                                                /* its bit length */
850 {
851         register unsigned res = 0;
852
853         do {
854                 res |= code & 1;
855                 code >>= 1, res <<= 1;
856         } while (--len > 0);
857         return res >> 1;
858 }
859
860 /* ===========================================================================
861  * Write out any remaining bits in an incomplete byte.
862  */
863 void bi_windup()
864 {
865         if (bi_valid > 8) {
866                 put_short(bi_buf);
867         } else if (bi_valid > 0) {
868                 put_byte(bi_buf);
869         }
870         bi_buf = 0;
871         bi_valid = 0;
872 #ifdef DEBUG
873         bits_sent = (bits_sent + 7) & ~7;
874 #endif
875 }
876
877 /* ===========================================================================
878  * Copy a stored block to the zip file, storing first the length and its
879  * one's complement if requested.
880  */
881 void copy_block(buf, len, header)
882 char *buf;                                              /* the input data */
883 unsigned len;                                   /* its length */
884 int header;                                             /* true if block header must be written */
885 {
886         bi_windup();                            /* align on byte boundary */
887
888         if (header) {
889                 put_short((ush) len);
890                 put_short((ush) ~ len);
891 #ifdef DEBUG
892                 bits_sent += 2 * 16;
893 #endif
894         }
895 #ifdef DEBUG
896         bits_sent += (ulg) len << 3;
897 #endif
898         while (len--) {
899 #ifdef CRYPT
900                 int t;
901
902                 if (key)
903                         zencode(*buf, t);
904 #endif
905                 put_byte(*buf++);
906         }
907 }
908
909 /* deflate.c -- compress data using the deflation algorithm
910  * Copyright (C) 1992-1993 Jean-loup Gailly
911  * This is free software; you can redistribute it and/or modify it under the
912  * terms of the GNU General Public License, see the file COPYING.
913  */
914
915 /*
916  *  PURPOSE
917  *
918  *      Identify new text as repetitions of old text within a fixed-
919  *      length sliding window trailing behind the new text.
920  *
921  *  DISCUSSION
922  *
923  *      The "deflation" process depends on being able to identify portions
924  *      of the input text which are identical to earlier input (within a
925  *      sliding window trailing behind the input currently being processed).
926  *
927  *      The most straightforward technique turns out to be the fastest for
928  *      most input files: try all possible matches and select the longest.
929  *      The key feature of this algorithm is that insertions into the string
930  *      dictionary are very simple and thus fast, and deletions are avoided
931  *      completely. Insertions are performed at each input character, whereas
932  *      string matches are performed only when the previous match ends. So it
933  *      is preferable to spend more time in matches to allow very fast string
934  *      insertions and avoid deletions. The matching algorithm for small
935  *      strings is inspired from that of Rabin & Karp. A brute force approach
936  *      is used to find longer strings when a small match has been found.
937  *      A similar algorithm is used in comic (by Jan-Mark Wams) and freeze
938  *      (by Leonid Broukhis).
939  *         A previous version of this file used a more sophisticated algorithm
940  *      (by Fiala and Greene) which is guaranteed to run in linear amortized
941  *      time, but has a larger average cost, uses more memory and is patented.
942  *      However the F&G algorithm may be faster for some highly redundant
943  *      files if the parameter max_chain_length (described below) is too large.
944  *
945  *  ACKNOWLEDGEMENTS
946  *
947  *      The idea of lazy evaluation of matches is due to Jan-Mark Wams, and
948  *      I found it in 'freeze' written by Leonid Broukhis.
949  *      Thanks to many info-zippers for bug reports and testing.
950  *
951  *  REFERENCES
952  *
953  *      APPNOTE.TXT documentation file in PKZIP 1.93a distribution.
954  *
955  *      A description of the Rabin and Karp algorithm is given in the book
956  *         "Algorithms" by R. Sedgewick, Addison-Wesley, p252.
957  *
958  *      Fiala,E.R., and Greene,D.H.
959  *         Data Compression with Finite Windows, Comm.ACM, 32,4 (1989) 490-595
960  *
961  *  INTERFACE
962  *
963  *      void lm_init (int pack_level, ush *flags)
964  *          Initialize the "longest match" routines for a new file
965  *
966  *      ulg deflate (void)
967  *          Processes a new input file and return its compressed length. Sets
968  *          the compressed length, crc, deflate flags and internal file
969  *          attributes.
970  */
971
972 #include <stdio.h>
973
974 /* ===========================================================================
975  * Configuration parameters
976  */
977
978 /* Compile with MEDIUM_MEM to reduce the memory requirements or
979  * with SMALL_MEM to use as little memory as possible. Use BIG_MEM if the
980  * entire input file can be held in memory (not possible on 16 bit systems).
981  * Warning: defining these symbols affects HASH_BITS (see below) and thus
982  * affects the compression ratio. The compressed output
983  * is still correct, and might even be smaller in some cases.
984  */
985
986 #ifdef SMALL_MEM
987 #   define HASH_BITS  13                /* Number of bits used to hash strings */
988 #endif
989 #ifdef MEDIUM_MEM
990 #   define HASH_BITS  14
991 #endif
992 #ifndef HASH_BITS
993 #   define HASH_BITS  15
994    /* For portability to 16 bit machines, do not use values above 15. */
995 #endif
996
997 /* To save space (see unlzw.c), we overlay prev+head with tab_prefix and
998  * window with tab_suffix. Check that we can do this:
999  */
1000 #if (WSIZE<<1) > (1<<BITS)
1001 error:cannot overlay window with tab_suffix and prev with tab_prefix0
1002 #endif
1003 #if HASH_BITS > BITS-1
1004 error:cannot overlay head with tab_prefix1
1005 #endif
1006 #define HASH_SIZE (unsigned)(1<<HASH_BITS)
1007 #define HASH_MASK (HASH_SIZE-1)
1008 #define WMASK     (WSIZE-1)
1009 /* HASH_SIZE and WSIZE must be powers of two */
1010 #define NIL 0
1011 /* Tail of hash chains */
1012 #define FAST 4
1013 #define SLOW 2
1014 /* speed options for the general purpose bit flag */
1015 #ifndef TOO_FAR
1016 #  define TOO_FAR 4096
1017 #endif
1018 /* Matches of length 3 are discarded if their distance exceeds TOO_FAR */
1019 /* ===========================================================================
1020  * Local data used by the "longest match" routines.
1021  */
1022 typedef ush Pos;
1023 typedef unsigned IPos;
1024
1025 /* A Pos is an index in the character window. We use short instead of int to
1026  * save space in the various tables. IPos is used only for parameter passing.
1027  */
1028
1029 /* DECLARE(uch, window, 2L*WSIZE); */
1030 /* Sliding window. Input bytes are read into the second half of the window,
1031  * and move to the first half later to keep a dictionary of at least WSIZE
1032  * bytes. With this organization, matches are limited to a distance of
1033  * WSIZE-MAX_MATCH bytes, but this ensures that IO is always
1034  * performed with a length multiple of the block size. Also, it limits
1035  * the window size to 64K, which is quite useful on MSDOS.
1036  * To do: limit the window size to WSIZE+BSZ if SMALL_MEM (the code would
1037  * be less efficient).
1038  */
1039
1040 /* DECLARE(Pos, prev, WSIZE); */
1041 /* Link to older string with same hash index. To limit the size of this
1042  * array to 64K, this link is maintained only for the last 32K strings.
1043  * An index in this array is thus a window index modulo 32K.
1044  */
1045
1046 /* DECLARE(Pos, head, 1<<HASH_BITS); */
1047 /* Heads of the hash chains or NIL. */
1048
1049 ulg window_size = (ulg) 2 * WSIZE;
1050
1051 /* window size, 2*WSIZE except for MMAP or BIG_MEM, where it is the
1052  * input file length plus MIN_LOOKAHEAD.
1053  */
1054
1055 long block_start;
1056
1057 /* window position at the beginning of the current output block. Gets
1058  * negative when the window is moved backwards.
1059  */
1060
1061 local unsigned ins_h;                   /* hash index of string to be inserted */
1062
1063 #define H_SHIFT  ((HASH_BITS+MIN_MATCH-1)/MIN_MATCH)
1064 /* Number of bits by which ins_h and del_h must be shifted at each
1065  * input step. It must be such that after MIN_MATCH steps, the oldest
1066  * byte no longer takes part in the hash key, that is:
1067  *   H_SHIFT * MIN_MATCH >= HASH_BITS
1068  */
1069
1070 unsigned int near prev_length;
1071
1072 /* Length of the best match at previous step. Matches not greater than this
1073  * are discarded. This is used in the lazy match evaluation.
1074  */
1075
1076 unsigned near strstart;                 /* start of string to insert */
1077 unsigned near match_start;              /* start of matching string */
1078 local int eofile;                               /* flag set at end of input file */
1079 local unsigned lookahead;               /* number of valid bytes ahead in window */
1080
1081 unsigned near max_chain_length;
1082
1083 /* To speed up deflation, hash chains are never searched beyond this length.
1084  * A higher limit improves compression ratio but degrades the speed.
1085  */
1086
1087 local unsigned int max_lazy_match;
1088
1089 /* Attempt to find a better match only when the current match is strictly
1090  * smaller than this value. This mechanism is used only for compression
1091  * levels >= 4.
1092  */
1093 #define max_insert_length  max_lazy_match
1094 /* Insert new strings in the hash table only if the match length
1095  * is not greater than this length. This saves time but degrades compression.
1096  * max_insert_length is used only for compression levels <= 3.
1097  */
1098
1099 unsigned near good_match;
1100
1101 /* Use a faster search when the previous match is longer than this */
1102
1103
1104 /* Values for max_lazy_match, good_match and max_chain_length, depending on
1105  * the desired pack level (0..9). The values given below have been tuned to
1106  * exclude worst case performance for pathological files. Better values may be
1107  * found for specific files.
1108  */
1109
1110 typedef struct config {
1111         ush good_length;                        /* reduce lazy search above this match length */
1112         ush max_lazy;                           /* do not perform lazy search above this match length */
1113         ush nice_length;                        /* quit search above this match length */
1114         ush max_chain;
1115 } config;
1116
1117 #ifdef  FULL_SEARCH
1118 # define nice_match MAX_MATCH
1119 #else
1120 int near nice_match;                    /* Stop searching when current match exceeds this */
1121 #endif
1122
1123 local config configuration_table =
1124                                                                 /* 9 */ { 32, 258, 258, 4096 };
1125                                                                 /* maximum compression */
1126
1127 /* Note: the deflate() code requires max_lazy >= MIN_MATCH and max_chain >= 4
1128  * For deflate_fast() (levels <= 3) good is ignored and lazy has a different
1129  * meaning.
1130  */
1131
1132 #define EQUAL 0
1133 /* result of memcmp for equal strings */
1134
1135 /* ===========================================================================
1136  *  Prototypes for local functions.
1137  */
1138 local void fill_window (void);
1139
1140 int longest_match (IPos cur_match);
1141
1142 #ifdef ASMV
1143 void match_init (void);         /* asm code initialization */
1144 #endif
1145
1146 #ifdef DEBUG
1147 local void check_match (IPos start, IPos match, int length);
1148 #endif
1149
1150 /* ===========================================================================
1151  * Update a hash value with the given input byte
1152  * IN  assertion: all calls to to UPDATE_HASH are made with consecutive
1153  *    input characters, so that a running hash key can be computed from the
1154  *    previous key instead of complete recalculation each time.
1155  */
1156 #define UPDATE_HASH(h,c) (h = (((h)<<H_SHIFT) ^ (c)) & HASH_MASK)
1157
1158 /* ===========================================================================
1159  * Insert string s in the dictionary and set match_head to the previous head
1160  * of the hash chain (the most recent string with same hash key). Return
1161  * the previous length of the hash chain.
1162  * IN  assertion: all calls to to INSERT_STRING are made with consecutive
1163  *    input characters and the first MIN_MATCH bytes of s are valid
1164  *    (except for the last MIN_MATCH-1 bytes of the input file).
1165  */
1166 #define INSERT_STRING(s, match_head) \
1167    (UPDATE_HASH(ins_h, window[(s) + MIN_MATCH-1]), \
1168     prev[(s) & WMASK] = match_head = head[ins_h], \
1169     head[ins_h] = (s))
1170
1171 /* ===========================================================================
1172  * Initialize the "longest match" routines for a new file
1173  */
1174 void lm_init(flags)
1175 ush *flags;                                             /* general purpose bit flag */
1176 {
1177         register unsigned j;
1178
1179         /* Initialize the hash table. */
1180 #if defined(MAXSEG_64K) && HASH_BITS == 15
1181         for (j = 0; j < HASH_SIZE; j++)
1182                 head[j] = NIL;
1183 #else
1184         memzero((char *) head, HASH_SIZE * sizeof(*head));
1185 #endif
1186         /* prev will be initialized on the fly */
1187
1188         /* Set the default configuration parameters:
1189          */
1190         max_lazy_match = configuration_table.max_lazy;
1191         good_match = configuration_table.good_length;
1192 #ifndef FULL_SEARCH
1193         nice_match = configuration_table.nice_length;
1194 #endif
1195         max_chain_length = configuration_table.max_chain;
1196         *flags |= SLOW;
1197         /* ??? reduce max_chain_length for binary files */
1198
1199         strstart = 0;
1200         block_start = 0L;
1201 #ifdef ASMV
1202         match_init();                           /* initialize the asm code */
1203 #endif
1204
1205         lookahead = read_buf((char *) window,
1206                                                  sizeof(int) <= 2 ? (unsigned) WSIZE : 2 * WSIZE);
1207
1208         if (lookahead == 0 || lookahead == (unsigned) EOF) {
1209                 eofile = 1, lookahead = 0;
1210                 return;
1211         }
1212         eofile = 0;
1213         /* Make sure that we always have enough lookahead. This is important
1214          * if input comes from a device such as a tty.
1215          */
1216         while (lookahead < MIN_LOOKAHEAD && !eofile)
1217                 fill_window();
1218
1219         ins_h = 0;
1220         for (j = 0; j < MIN_MATCH - 1; j++)
1221                 UPDATE_HASH(ins_h, window[j]);
1222         /* If lookahead < MIN_MATCH, ins_h is garbage, but this is
1223          * not important since only literal bytes will be emitted.
1224          */
1225 }
1226
1227 /* ===========================================================================
1228  * Set match_start to the longest match starting at the given string and
1229  * return its length. Matches shorter or equal to prev_length are discarded,
1230  * in which case the result is equal to prev_length and match_start is
1231  * garbage.
1232  * IN assertions: cur_match is the head of the hash chain for the current
1233  *   string (strstart) and its distance is <= MAX_DIST, and prev_length >= 1
1234  */
1235 #ifndef ASMV
1236 /* For MSDOS, OS/2 and 386 Unix, an optimized version is in match.asm or
1237  * match.s. The code is functionally equivalent, so you can use the C version
1238  * if desired.
1239  */
1240 int longest_match(cur_match)
1241 IPos cur_match;                                 /* current match */
1242 {
1243         unsigned chain_length = max_chain_length;       /* max hash chain length */
1244         register uch *scan = window + strstart; /* current string */
1245         register uch *match;            /* matched string */
1246         register int len;                       /* length of current match */
1247         int best_len = prev_length;     /* best match length so far */
1248         IPos limit =
1249
1250                 strstart > (IPos) MAX_DIST ? strstart - (IPos) MAX_DIST : NIL;
1251         /* Stop when cur_match becomes <= limit. To simplify the code,
1252          * we prevent matches with the string of window index 0.
1253          */
1254
1255 /* The code is optimized for HASH_BITS >= 8 and MAX_MATCH-2 multiple of 16.
1256  * It is easy to get rid of this optimization if necessary.
1257  */
1258 #if HASH_BITS < 8 || MAX_MATCH != 258
1259   error:Code too clever
1260 #endif
1261 #ifdef UNALIGNED_OK
1262                 /* Compare two bytes at a time. Note: this is not always beneficial.
1263                  * Try with and without -DUNALIGNED_OK to check.
1264                  */
1265         register uch *strend = window + strstart + MAX_MATCH - 1;
1266         register ush scan_start = *(ush *) scan;
1267         register ush scan_end = *(ush *) (scan + best_len - 1);
1268 #else
1269         register uch *strend = window + strstart + MAX_MATCH;
1270         register uch scan_end1 = scan[best_len - 1];
1271         register uch scan_end = scan[best_len];
1272 #endif
1273
1274         /* Do not waste too much time if we already have a good match: */
1275         if (prev_length >= good_match) {
1276                 chain_length >>= 2;
1277         }
1278         Assert(strstart <= window_size - MIN_LOOKAHEAD,
1279                    "insufficient lookahead");
1280
1281         do {
1282                 Assert(cur_match < strstart, "no future");
1283                 match = window + cur_match;
1284
1285                 /* Skip to next match if the match length cannot increase
1286                  * or if the match length is less than 2:
1287                  */
1288 #if (defined(UNALIGNED_OK) && MAX_MATCH == 258)
1289                 /* This code assumes sizeof(unsigned short) == 2. Do not use
1290                  * UNALIGNED_OK if your compiler uses a different size.
1291                  */
1292                 if (*(ush *) (match + best_len - 1) != scan_end ||
1293                         *(ush *) match != scan_start)
1294                         continue;
1295
1296                 /* It is not necessary to compare scan[2] and match[2] since they are
1297                  * always equal when the other bytes match, given that the hash keys
1298                  * are equal and that HASH_BITS >= 8. Compare 2 bytes at a time at
1299                  * strstart+3, +5, ... up to strstart+257. We check for insufficient
1300                  * lookahead only every 4th comparison; the 128th check will be made
1301                  * at strstart+257. If MAX_MATCH-2 is not a multiple of 8, it is
1302                  * necessary to put more guard bytes at the end of the window, or
1303                  * to check more often for insufficient lookahead.
1304                  */
1305                 scan++, match++;
1306                 do {
1307                 } while (*(ush *) (scan += 2) == *(ush *) (match += 2) &&
1308                                  *(ush *) (scan += 2) == *(ush *) (match += 2) &&
1309                                  *(ush *) (scan += 2) == *(ush *) (match += 2) &&
1310                                  *(ush *) (scan += 2) == *(ush *) (match += 2) &&
1311                                  scan < strend);
1312                 /* The funny "do {}" generates better code on most compilers */
1313
1314                 /* Here, scan <= window+strstart+257 */
1315                 Assert(scan <= window + (unsigned) (window_size - 1), "wild scan");
1316                 if (*scan == *match)
1317                         scan++;
1318
1319                 len = (MAX_MATCH - 1) - (int) (strend - scan);
1320                 scan = strend - (MAX_MATCH - 1);
1321
1322 #else                                                   /* UNALIGNED_OK */
1323
1324                 if (match[best_len] != scan_end ||
1325                         match[best_len - 1] != scan_end1 ||
1326                         *match != *scan || *++match != scan[1])
1327                         continue;
1328
1329                 /* The check at best_len-1 can be removed because it will be made
1330                  * again later. (This heuristic is not always a win.)
1331                  * It is not necessary to compare scan[2] and match[2] since they
1332                  * are always equal when the other bytes match, given that
1333                  * the hash keys are equal and that HASH_BITS >= 8.
1334                  */
1335                 scan += 2, match++;
1336
1337                 /* We check for insufficient lookahead only every 8th comparison;
1338                  * the 256th check will be made at strstart+258.
1339                  */
1340                 do {
1341                 } while (*++scan == *++match && *++scan == *++match &&
1342                                  *++scan == *++match && *++scan == *++match &&
1343                                  *++scan == *++match && *++scan == *++match &&
1344                                  *++scan == *++match && *++scan == *++match &&
1345                                  scan < strend);
1346
1347                 len = MAX_MATCH - (int) (strend - scan);
1348                 scan = strend - MAX_MATCH;
1349
1350 #endif                                                  /* UNALIGNED_OK */
1351
1352                 if (len > best_len) {
1353                         match_start = cur_match;
1354                         best_len = len;
1355                         if (len >= nice_match)
1356                                 break;
1357 #ifdef UNALIGNED_OK
1358                         scan_end = *(ush *) (scan + best_len - 1);
1359 #else
1360                         scan_end1 = scan[best_len - 1];
1361                         scan_end = scan[best_len];
1362 #endif
1363                 }
1364         } while ((cur_match = prev[cur_match & WMASK]) > limit
1365                          && --chain_length != 0);
1366
1367         return best_len;
1368 }
1369 #endif                                                  /* ASMV */
1370
1371 #ifdef DEBUG
1372 /* ===========================================================================
1373  * Check that the match at match_start is indeed a match.
1374  */
1375 local void check_match(start, match, length)
1376 IPos start, match;
1377 int length;
1378 {
1379         /* check that the match is indeed a match */
1380         if (memcmp((char *) window + match,
1381                            (char *) window + start, length) != EQUAL) {
1382                 fprintf(stderr,
1383                                 " start %d, match %d, length %d\n", start, match, length);
1384                 error_msg("invalid match\n");
1385         }
1386         if (verbose > 1) {
1387                 fprintf(stderr, "\\[%d,%d]", start - match, length);
1388                 do {
1389                         putc(window[start++], stderr);
1390                 } while (--length != 0);
1391         }
1392 }
1393 #else
1394 #  define check_match(start, match, length)
1395 #endif
1396
1397 /* ===========================================================================
1398  * Fill the window when the lookahead becomes insufficient.
1399  * Updates strstart and lookahead, and sets eofile if end of input file.
1400  * IN assertion: lookahead < MIN_LOOKAHEAD && strstart + lookahead > 0
1401  * OUT assertions: at least one byte has been read, or eofile is set;
1402  *    file reads are performed for at least two bytes (required for the
1403  *    translate_eol option).
1404  */
1405 local void fill_window()
1406 {
1407         register unsigned n, m;
1408         unsigned more =
1409
1410                 (unsigned) (window_size - (ulg) lookahead - (ulg) strstart);
1411         /* Amount of free space at the end of the window. */
1412
1413         /* If the window is almost full and there is insufficient lookahead,
1414          * move the upper half to the lower one to make room in the upper half.
1415          */
1416         if (more == (unsigned) EOF) {
1417                 /* Very unlikely, but possible on 16 bit machine if strstart == 0
1418                  * and lookahead == 1 (input done one byte at time)
1419                  */
1420                 more--;
1421         } else if (strstart >= WSIZE + MAX_DIST) {
1422                 /* By the IN assertion, the window is not empty so we can't confuse
1423                  * more == 0 with more == 64K on a 16 bit machine.
1424                  */
1425                 Assert(window_size == (ulg) 2 * WSIZE, "no sliding with BIG_MEM");
1426
1427                 memcpy((char *) window, (char *) window + WSIZE, (unsigned) WSIZE);
1428                 match_start -= WSIZE;
1429                 strstart -= WSIZE;              /* we now have strstart >= MAX_DIST: */
1430
1431                 block_start -= (long) WSIZE;
1432
1433                 for (n = 0; n < HASH_SIZE; n++) {
1434                         m = head[n];
1435                         head[n] = (Pos) (m >= WSIZE ? m - WSIZE : NIL);
1436                 }
1437                 for (n = 0; n < WSIZE; n++) {
1438                         m = prev[n];
1439                         prev[n] = (Pos) (m >= WSIZE ? m - WSIZE : NIL);
1440                         /* If n is not on any hash chain, prev[n] is garbage but
1441                          * its value will never be used.
1442                          */
1443                 }
1444                 more += WSIZE;
1445         }
1446         /* At this point, more >= 2 */
1447         if (!eofile) {
1448                 n = read_buf((char *) window + strstart + lookahead, more);
1449                 if (n == 0 || n == (unsigned) EOF) {
1450                         eofile = 1;
1451                 } else {
1452                         lookahead += n;
1453                 }
1454         }
1455 }
1456
1457 /* ===========================================================================
1458  * Flush the current block, with given end-of-file flag.
1459  * IN assertion: strstart is set to the end of the current match.
1460  */
1461 #define FLUSH_BLOCK(eof) \
1462    flush_block(block_start >= 0L ? (char*)&window[(unsigned)block_start] : \
1463                 (char*)NULL, (long)strstart - block_start, (eof))
1464
1465 /* ===========================================================================
1466  * Same as above, but achieves better compression. We use a lazy
1467  * evaluation for matches: a match is finally adopted only if there is
1468  * no better match at the next window position.
1469  */
1470 ulg deflate()
1471 {
1472         IPos hash_head;                         /* head of hash chain */
1473         IPos prev_match;                        /* previous match */
1474         int flush;                                      /* set if current block must be flushed */
1475         int match_available = 0;        /* set if previous match exists */
1476         register unsigned match_length = MIN_MATCH - 1; /* length of best match */
1477
1478 #ifdef DEBUG
1479         extern long isize;                      /* byte length of input file, for debug only */
1480 #endif
1481
1482         /* Process the input block. */
1483         while (lookahead != 0) {
1484                 /* Insert the string window[strstart .. strstart+2] in the
1485                  * dictionary, and set hash_head to the head of the hash chain:
1486                  */
1487                 INSERT_STRING(strstart, hash_head);
1488
1489                 /* Find the longest match, discarding those <= prev_length.
1490                  */
1491                 prev_length = match_length, prev_match = match_start;
1492                 match_length = MIN_MATCH - 1;
1493
1494                 if (hash_head != NIL && prev_length < max_lazy_match &&
1495                         strstart - hash_head <= MAX_DIST) {
1496                         /* To simplify the code, we prevent matches with the string
1497                          * of window index 0 (in particular we have to avoid a match
1498                          * of the string with itself at the start of the input file).
1499                          */
1500                         match_length = longest_match(hash_head);
1501                         /* longest_match() sets match_start */
1502                         if (match_length > lookahead)
1503                                 match_length = lookahead;
1504
1505                         /* Ignore a length 3 match if it is too distant: */
1506                         if (match_length == MIN_MATCH
1507                                 && strstart - match_start > TOO_FAR) {
1508                                 /* If prev_match is also MIN_MATCH, match_start is garbage
1509                                  * but we will ignore the current match anyway.
1510                                  */
1511                                 match_length--;
1512                         }
1513                 }
1514                 /* If there was a match at the previous step and the current
1515                  * match is not better, output the previous match:
1516                  */
1517                 if (prev_length >= MIN_MATCH && match_length <= prev_length) {
1518
1519                         check_match(strstart - 1, prev_match, prev_length);
1520
1521                         flush =
1522                                 ct_tally(strstart - 1 - prev_match,
1523                                                  prev_length - MIN_MATCH);
1524
1525                         /* Insert in hash table all strings up to the end of the match.
1526                          * strstart-1 and strstart are already inserted.
1527                          */
1528                         lookahead -= prev_length - 1;
1529                         prev_length -= 2;
1530                         do {
1531                                 strstart++;
1532                                 INSERT_STRING(strstart, hash_head);
1533                                 /* strstart never exceeds WSIZE-MAX_MATCH, so there are
1534                                  * always MIN_MATCH bytes ahead. If lookahead < MIN_MATCH
1535                                  * these bytes are garbage, but it does not matter since the
1536                                  * next lookahead bytes will always be emitted as literals.
1537                                  */
1538                         } while (--prev_length != 0);
1539                         match_available = 0;
1540                         match_length = MIN_MATCH - 1;
1541                         strstart++;
1542                         if (flush)
1543                                 FLUSH_BLOCK(0), block_start = strstart;
1544
1545                 } else if (match_available) {
1546                         /* If there was no match at the previous position, output a
1547                          * single literal. If there was a match but the current match
1548                          * is longer, truncate the previous match to a single literal.
1549                          */
1550                         Tracevv((stderr, "%c", window[strstart - 1]));
1551                         if (ct_tally(0, window[strstart - 1])) {
1552                                 FLUSH_BLOCK(0), block_start = strstart;
1553                         }
1554                         strstart++;
1555                         lookahead--;
1556                 } else {
1557                         /* There is no previous match to compare with, wait for
1558                          * the next step to decide.
1559                          */
1560                         match_available = 1;
1561                         strstart++;
1562                         lookahead--;
1563                 }
1564                 Assert(strstart <= isize && lookahead <= isize, "a bit too far");
1565
1566                 /* Make sure that we always have enough lookahead, except
1567                  * at the end of the input file. We need MAX_MATCH bytes
1568                  * for the next match, plus MIN_MATCH bytes to insert the
1569                  * string following the next match.
1570                  */
1571                 while (lookahead < MIN_LOOKAHEAD && !eofile)
1572                         fill_window();
1573         }
1574         if (match_available)
1575                 ct_tally(0, window[strstart - 1]);
1576
1577         return FLUSH_BLOCK(1);          /* eof */
1578 }
1579
1580 /* gzip (GNU zip) -- compress files with zip algorithm and 'compress' interface
1581  * Copyright (C) 1992-1993 Jean-loup Gailly
1582  * The unzip code was written and put in the public domain by Mark Adler.
1583  * Portions of the lzw code are derived from the public domain 'compress'
1584  * written by Spencer Thomas, Joe Orost, James Woods, Jim McKie, Steve Davies,
1585  * Ken Turkowski, Dave Mack and Peter Jannesen.
1586  *
1587  * See the license_msg below and the file COPYING for the software license.
1588  * See the file algorithm.doc for the compression algorithms and file formats.
1589  */
1590
1591 /* Compress files with zip algorithm and 'compress' interface.
1592  * See usage() and help() functions below for all options.
1593  * Outputs:
1594  *        file.gz:   compressed file with same mode, owner, and utimes
1595  *     or stdout with -c option or if stdin used as input.
1596  * If the output file name had to be truncated, the original name is kept
1597  * in the compressed file.
1598  * On MSDOS, file.tmp -> file.tmz. On VMS, file.tmp -> file.tmp-gz.
1599  *
1600  * Using gz on MSDOS would create too many file name conflicts. For
1601  * example, foo.txt -> foo.tgz (.tgz must be reserved as shorthand for
1602  * tar.gz). Similarly, foo.dir and foo.doc would both be mapped to foo.dgz.
1603  * I also considered 12345678.txt -> 12345txt.gz but this truncates the name
1604  * too heavily. There is no ideal solution given the MSDOS 8+3 limitation. 
1605  *
1606  * For the meaning of all compilation flags, see comments in Makefile.in.
1607  */
1608
1609 #include <ctype.h>
1610 #include <sys/types.h>
1611 #include <signal.h>
1612 #include <errno.h>
1613
1614                 /* configuration */
1615
1616 #ifdef NO_TIME_H
1617 #  include <sys/time.h>
1618 #else
1619 #  include <time.h>
1620 #endif
1621
1622 #ifndef NO_FCNTL_H
1623 #  include <fcntl.h>
1624 #endif
1625
1626 #ifdef HAVE_UNISTD_H
1627 #  include <unistd.h>
1628 #endif
1629
1630 #if defined(STDC_HEADERS) || !defined(NO_STDLIB_H)
1631 #  include <stdlib.h>
1632 #else
1633 extern int errno;
1634 #endif
1635
1636 #if defined(DIRENT)
1637 #  include <dirent.h>
1638 typedef struct dirent dir_type;
1639
1640 #  define NLENGTH(dirent) ((int)strlen((dirent)->d_name))
1641 #  define DIR_OPT "DIRENT"
1642 #else
1643 #  define NLENGTH(dirent) ((dirent)->d_namlen)
1644 #  ifdef SYSDIR
1645 #    include <sys/dir.h>
1646 typedef struct direct dir_type;
1647
1648 #    define DIR_OPT "SYSDIR"
1649 #  else
1650 #    ifdef SYSNDIR
1651 #      include <sys/ndir.h>
1652 typedef struct direct dir_type;
1653
1654 #      define DIR_OPT "SYSNDIR"
1655 #    else
1656 #      ifdef NDIR
1657 #        include <ndir.h>
1658 typedef struct direct dir_type;
1659
1660 #        define DIR_OPT "NDIR"
1661 #      else
1662 #        define NO_DIR
1663 #        define DIR_OPT "NO_DIR"
1664 #      endif
1665 #    endif
1666 #  endif
1667 #endif
1668
1669 #ifndef NO_UTIME
1670 #  ifndef NO_UTIME_H
1671 #    include <utime.h>
1672 #    define TIME_OPT "UTIME"
1673 #  else
1674 #    ifdef HAVE_SYS_UTIME_H
1675 #      include <sys/utime.h>
1676 #      define TIME_OPT "SYS_UTIME"
1677 #    else
1678 struct utimbuf {
1679         time_t actime;
1680         time_t modtime;
1681 };
1682
1683 #      define TIME_OPT ""
1684 #    endif
1685 #  endif
1686 #else
1687 #  define TIME_OPT "NO_UTIME"
1688 #endif
1689
1690 #if !defined(S_ISDIR) && defined(S_IFDIR)
1691 #  define S_ISDIR(m) (((m) & S_IFMT) == S_IFDIR)
1692 #endif
1693 #if !defined(S_ISREG) && defined(S_IFREG)
1694 #  define S_ISREG(m) (((m) & S_IFMT) == S_IFREG)
1695 #endif
1696
1697 typedef RETSIGTYPE(*sig_type) (int);
1698
1699 #ifndef O_BINARY
1700 #  define  O_BINARY  0                  /* creation mode for open() */
1701 #endif
1702
1703 #ifndef O_CREAT
1704    /* Pure BSD system? */
1705 #  include <sys/file.h>
1706 #  ifndef O_CREAT
1707 #    define O_CREAT FCREAT
1708 #  endif
1709 #  ifndef O_EXCL
1710 #    define O_EXCL FEXCL
1711 #  endif
1712 #endif
1713
1714 #ifndef S_IRUSR
1715 #  define S_IRUSR 0400
1716 #endif
1717 #ifndef S_IWUSR
1718 #  define S_IWUSR 0200
1719 #endif
1720 #define RW_USER (S_IRUSR | S_IWUSR)     /* creation mode for open() */
1721
1722 #ifndef MAX_PATH_LEN
1723 #  define MAX_PATH_LEN   1024   /* max pathname length */
1724 #endif
1725
1726 #ifndef SEEK_END
1727 #  define SEEK_END 2
1728 #endif
1729
1730 #ifdef NO_OFF_T
1731 typedef long off_t;
1732 off_t lseek (int fd, off_t offset, int whence);
1733 #endif
1734
1735 /* Separator for file name parts (see shorten_name()) */
1736 #ifdef NO_MULTIPLE_DOTS
1737 #  define PART_SEP "-"
1738 #else
1739 #  define PART_SEP "."
1740 #endif
1741
1742                 /* global buffers */
1743
1744 DECLARE(uch, inbuf, INBUFSIZ + INBUF_EXTRA);
1745 DECLARE(uch, outbuf, OUTBUFSIZ + OUTBUF_EXTRA);
1746 DECLARE(ush, d_buf, DIST_BUFSIZE);
1747 DECLARE(uch, window, 2L * WSIZE);
1748 #ifndef MAXSEG_64K
1749 DECLARE(ush, tab_prefix, 1L << BITS);
1750 #else
1751 DECLARE(ush, tab_prefix0, 1L << (BITS - 1));
1752 DECLARE(ush, tab_prefix1, 1L << (BITS - 1));
1753 #endif
1754
1755                 /* local variables */
1756
1757 static int foreground;                                  /* set if program run in foreground */
1758 static int method = DEFLATED;   /* compression method */
1759 static int exit_code = OK;              /* program exit code */
1760 static int part_nb;                                     /* number of parts in .gz file */
1761 static long time_stamp;                         /* original time stamp (modification time) */
1762 static long ifile_size;                         /* input file size, -1 for devices (debug only) */
1763 static char z_suffix[MAX_SUFFIX + 1];   /* default suffix (can be set with --suffix) */
1764 static int z_len;                                               /* strlen(z_suffix) */
1765
1766 static long bytes_in;                                   /* number of input bytes */
1767 static long bytes_out;                                  /* number of output bytes */
1768 static char ifname[MAX_PATH_LEN];               /* input file name */
1769 static char ofname[MAX_PATH_LEN];               /* output file name */
1770 static int ifd;                                         /* input file descriptor */
1771 static int ofd;                                         /* output file descriptor */
1772 static unsigned insize;                         /* valid bytes in inbuf */
1773 static unsigned outcnt;                         /* bytes in output buffer */
1774
1775 /* local functions */
1776
1777 #define strequ(s1, s2) (strcmp((s1),(s2)) == 0)
1778
1779 /* ======================================================================== */
1780 // int main (argc, argv)
1781 //    int argc;
1782 //    char **argv;
1783 int gzip_main(int argc, char **argv)
1784 {
1785         int result;
1786         int inFileNum;
1787         int outFileNum;
1788         struct stat statBuf;
1789         char *delFileName;
1790         int tostdout = 0;
1791         int fromstdin = 0;
1792         int force = 0;
1793
1794         /* Parse any options */
1795         while (--argc > 0 && **(++argv) == '-') {
1796                 if (*((*argv) + 1) == '\0') {
1797                         tostdout = 1;
1798                 }
1799                 while (*(++(*argv))) {
1800                         switch (**argv) {
1801                         case 'c':
1802                                 tostdout = 1;
1803                                 break;
1804                         case 'f':
1805                                 force = 1;
1806                                 break;
1807                         /* Ignore 1-9 (compression level) options */
1808                         case '1': case '2': case '3': case '4': case '5':
1809                         case '6': case '7': case '8': case '9':
1810                                 break;
1811                         case 'd':
1812                                 exit(gunzip_main(argc, argv));
1813                         default:
1814                                 usage(gzip_usage);
1815                         }
1816                 }
1817         }
1818         if (argc <= 0 ) {
1819                 fromstdin = 1;
1820                 tostdout = 1;
1821         }
1822
1823         if (isatty(fileno(stdin)) && fromstdin==1 && force==0)
1824                 error_msg_and_die( "data not read from terminal. Use -f to force it.\n");
1825         if (isatty(fileno(stdout)) && tostdout==1 && force==0)
1826                 error_msg_and_die( "data not written to terminal. Use -f to force it.\n");
1827
1828         foreground = signal(SIGINT, SIG_IGN) != SIG_IGN;
1829         if (foreground) {
1830                 (void) signal(SIGINT, (sig_type) abort_gzip);
1831         }
1832 #ifdef SIGTERM
1833         if (signal(SIGTERM, SIG_IGN) != SIG_IGN) {
1834                 (void) signal(SIGTERM, (sig_type) abort_gzip);
1835         }
1836 #endif
1837 #ifdef SIGHUP
1838         if (signal(SIGHUP, SIG_IGN) != SIG_IGN) {
1839                 (void) signal(SIGHUP, (sig_type) abort_gzip);
1840         }
1841 #endif
1842
1843         strncpy(z_suffix, Z_SUFFIX, sizeof(z_suffix) - 1);
1844         z_len = strlen(z_suffix);
1845
1846         /* Allocate all global buffers (for DYN_ALLOC option) */
1847         ALLOC(uch, inbuf, INBUFSIZ + INBUF_EXTRA);
1848         ALLOC(uch, outbuf, OUTBUFSIZ + OUTBUF_EXTRA);
1849         ALLOC(ush, d_buf, DIST_BUFSIZE);
1850         ALLOC(uch, window, 2L * WSIZE);
1851 #ifndef MAXSEG_64K
1852         ALLOC(ush, tab_prefix, 1L << BITS);
1853 #else
1854         ALLOC(ush, tab_prefix0, 1L << (BITS - 1));
1855         ALLOC(ush, tab_prefix1, 1L << (BITS - 1));
1856 #endif
1857
1858         if (fromstdin == 1) {
1859                 strcpy(ofname, "stdin");
1860
1861                 inFileNum = fileno(stdin);
1862                 time_stamp = 0;                 /* time unknown by default */
1863                 ifile_size = -1L;               /* convention for unknown size */
1864         } else {
1865                 /* Open up the input file */
1866                 if (argc <= 0)
1867                         usage(gzip_usage);
1868                 strncpy(ifname, *argv, MAX_PATH_LEN);
1869
1870                 /* Open input fille */
1871                 inFileNum = open(ifname, O_RDONLY);
1872                 if (inFileNum < 0) {
1873                         perror(ifname);
1874                         exit(WARNING);
1875                 }
1876                 /* Get the time stamp on the input file. */
1877                 result = stat(ifname, &statBuf);
1878                 if (result < 0) {
1879                         perror(ifname);
1880                         exit(WARNING);
1881                 }
1882                 time_stamp = statBuf.st_ctime;
1883                 ifile_size = statBuf.st_size;
1884         }
1885
1886
1887         if (tostdout == 1) {
1888                 /* And get to work */
1889                 strcpy(ofname, "stdout");
1890                 outFileNum = fileno(stdout);
1891                 SET_BINARY_MODE(fileno(stdout));
1892
1893                 clear_bufs();                   /* clear input and output buffers */
1894                 part_nb = 0;
1895
1896                 /* Actually do the compression/decompression. */
1897                 zip(inFileNum, outFileNum);
1898
1899         } else {
1900
1901                 /* And get to work */
1902                 strncpy(ofname, ifname, MAX_PATH_LEN - 4);
1903                 strcat(ofname, ".gz");
1904
1905
1906                 /* Open output fille */
1907 #if (__GLIBC__ >= 2) && (__GLIBC_MINOR__ >= 1)
1908                 outFileNum = open(ofname, O_RDWR | O_CREAT | O_EXCL | O_NOFOLLOW);
1909 #else
1910                 outFileNum = open(ofname, O_RDWR | O_CREAT | O_EXCL);
1911 #endif
1912                 if (outFileNum < 0) {
1913                         perror(ofname);
1914                         exit(WARNING);
1915                 }
1916                 SET_BINARY_MODE(outFileNum);
1917                 /* Set permissions on the file */
1918                 fchmod(outFileNum, statBuf.st_mode);
1919
1920                 clear_bufs();                   /* clear input and output buffers */
1921                 part_nb = 0;
1922
1923                 /* Actually do the compression/decompression. */
1924                 result = zip(inFileNum, outFileNum);
1925                 close(outFileNum);
1926                 close(inFileNum);
1927                 /* Delete the original file */
1928                 if (result == OK)
1929                         delFileName = ifname;
1930                 else
1931                         delFileName = ofname;
1932
1933                 if (unlink(delFileName) < 0) {
1934                         perror(delFileName);
1935                         exit(EXIT_FAILURE);
1936                 }
1937         }
1938
1939         return(exit_code);
1940 }
1941
1942 /* trees.c -- output deflated data using Huffman coding
1943  * Copyright (C) 1992-1993 Jean-loup Gailly
1944  * This is free software; you can redistribute it and/or modify it under the
1945  * terms of the GNU General Public License, see the file COPYING.
1946  */
1947
1948 /*
1949  *  PURPOSE
1950  *
1951  *      Encode various sets of source values using variable-length
1952  *      binary code trees.
1953  *
1954  *  DISCUSSION
1955  *
1956  *      The PKZIP "deflation" process uses several Huffman trees. The more
1957  *      common source values are represented by shorter bit sequences.
1958  *
1959  *      Each code tree is stored in the ZIP file in a compressed form
1960  *      which is itself a Huffman encoding of the lengths of
1961  *      all the code strings (in ascending order by source values).
1962  *      The actual code strings are reconstructed from the lengths in
1963  *      the UNZIP process, as described in the "application note"
1964  *      (APPNOTE.TXT) distributed as part of PKWARE's PKZIP program.
1965  *
1966  *  REFERENCES
1967  *
1968  *      Lynch, Thomas J.
1969  *          Data Compression:  Techniques and Applications, pp. 53-55.
1970  *          Lifetime Learning Publications, 1985.  ISBN 0-534-03418-7.
1971  *
1972  *      Storer, James A.
1973  *          Data Compression:  Methods and Theory, pp. 49-50.
1974  *          Computer Science Press, 1988.  ISBN 0-7167-8156-5.
1975  *
1976  *      Sedgewick, R.
1977  *          Algorithms, p290.
1978  *          Addison-Wesley, 1983. ISBN 0-201-06672-6.
1979  *
1980  *  INTERFACE
1981  *
1982  *      void ct_init (ush *attr, int *methodp)
1983  *          Allocate the match buffer, initialize the various tables and save
1984  *          the location of the internal file attribute (ascii/binary) and
1985  *          method (DEFLATE/STORE)
1986  *
1987  *      void ct_tally (int dist, int lc);
1988  *          Save the match info and tally the frequency counts.
1989  *
1990  *      long flush_block (char *buf, ulg stored_len, int eof)
1991  *          Determine the best encoding for the current block: dynamic trees,
1992  *          static trees or store, and output the encoded block to the zip
1993  *          file. Returns the total compressed length for the file so far.
1994  *
1995  */
1996
1997 #include <ctype.h>
1998
1999 /* ===========================================================================
2000  * Constants
2001  */
2002
2003 #define MAX_BITS 15
2004 /* All codes must not exceed MAX_BITS bits */
2005
2006 #define MAX_BL_BITS 7
2007 /* Bit length codes must not exceed MAX_BL_BITS bits */
2008
2009 #define LENGTH_CODES 29
2010 /* number of length codes, not counting the special END_BLOCK code */
2011
2012 #define LITERALS  256
2013 /* number of literal bytes 0..255 */
2014
2015 #define END_BLOCK 256
2016 /* end of block literal code */
2017
2018 #define L_CODES (LITERALS+1+LENGTH_CODES)
2019 /* number of Literal or Length codes, including the END_BLOCK code */
2020
2021 #define D_CODES   30
2022 /* number of distance codes */
2023
2024 #define BL_CODES  19
2025 /* number of codes used to transfer the bit lengths */
2026
2027
2028 local int near extra_lbits[LENGTH_CODES]        /* extra bits for each length code */
2029         = { 0, 0, 0, 0, 0, 0, 0, 0, 1, 1, 1, 1, 2, 2, 2, 2, 3, 3, 3, 3, 4, 4,
2030                 4, 4, 5, 5, 5, 5, 0 };
2031
2032 local int near extra_dbits[D_CODES]     /* extra bits for each distance code */
2033         = { 0, 0, 0, 0, 1, 1, 2, 2, 3, 3, 4, 4, 5, 5, 6, 6, 7, 7, 8, 8, 9, 9,
2034                 10, 10, 11, 11, 12, 12, 13, 13 };
2035
2036 local int near extra_blbits[BL_CODES]   /* extra bits for each bit length code */
2037 = { 0, 0, 0, 0, 0, 0, 0, 0, 0, 0, 0, 0, 0, 0, 0, 0, 2, 3, 7 };
2038
2039 #define STORED_BLOCK 0
2040 #define STATIC_TREES 1
2041 #define DYN_TREES    2
2042 /* The three kinds of block type */
2043
2044 #ifndef LIT_BUFSIZE
2045 #  ifdef SMALL_MEM
2046 #    define LIT_BUFSIZE  0x2000
2047 #  else
2048 #  ifdef MEDIUM_MEM
2049 #    define LIT_BUFSIZE  0x4000
2050 #  else
2051 #    define LIT_BUFSIZE  0x8000
2052 #  endif
2053 #  endif
2054 #endif
2055 #ifndef DIST_BUFSIZE
2056 #  define DIST_BUFSIZE  LIT_BUFSIZE
2057 #endif
2058 /* Sizes of match buffers for literals/lengths and distances.  There are
2059  * 4 reasons for limiting LIT_BUFSIZE to 64K:
2060  *   - frequencies can be kept in 16 bit counters
2061  *   - if compression is not successful for the first block, all input data is
2062  *     still in the window so we can still emit a stored block even when input
2063  *     comes from standard input.  (This can also be done for all blocks if
2064  *     LIT_BUFSIZE is not greater than 32K.)
2065  *   - if compression is not successful for a file smaller than 64K, we can
2066  *     even emit a stored file instead of a stored block (saving 5 bytes).
2067  *   - creating new Huffman trees less frequently may not provide fast
2068  *     adaptation to changes in the input data statistics. (Take for
2069  *     example a binary file with poorly compressible code followed by
2070  *     a highly compressible string table.) Smaller buffer sizes give
2071  *     fast adaptation but have of course the overhead of transmitting trees
2072  *     more frequently.
2073  *   - I can't count above 4
2074  * The current code is general and allows DIST_BUFSIZE < LIT_BUFSIZE (to save
2075  * memory at the expense of compression). Some optimizations would be possible
2076  * if we rely on DIST_BUFSIZE == LIT_BUFSIZE.
2077  */
2078 #if LIT_BUFSIZE > INBUFSIZ
2079 error cannot overlay l_buf and inbuf
2080 #endif
2081 #define REP_3_6      16
2082 /* repeat previous bit length 3-6 times (2 bits of repeat count) */
2083 #define REPZ_3_10    17
2084 /* repeat a zero length 3-10 times  (3 bits of repeat count) */
2085 #define REPZ_11_138  18
2086 /* repeat a zero length 11-138 times  (7 bits of repeat count) *//* ===========================================================================
2087  * Local data
2088  *//* Data structure describing a single value and its code string. */ typedef struct ct_data {
2089         union {
2090                 ush freq;                               /* frequency count */
2091                 ush code;                               /* bit string */
2092         } fc;
2093         union {
2094                 ush dad;                                /* father node in Huffman tree */
2095                 ush len;                                /* length of bit string */
2096         } dl;
2097 } ct_data;
2098
2099 #define Freq fc.freq
2100 #define Code fc.code
2101 #define Dad  dl.dad
2102 #define Len  dl.len
2103
2104 #define HEAP_SIZE (2*L_CODES+1)
2105 /* maximum heap size */
2106
2107 local ct_data near dyn_ltree[HEAP_SIZE];        /* literal and length tree */
2108 local ct_data near dyn_dtree[2 * D_CODES + 1];  /* distance tree */
2109
2110 local ct_data near static_ltree[L_CODES + 2];
2111
2112 /* The static literal tree. Since the bit lengths are imposed, there is no
2113  * need for the L_CODES extra codes used during heap construction. However
2114  * The codes 286 and 287 are needed to build a canonical tree (see ct_init
2115  * below).
2116  */
2117
2118 local ct_data near static_dtree[D_CODES];
2119
2120 /* The static distance tree. (Actually a trivial tree since all codes use
2121  * 5 bits.)
2122  */
2123
2124 local ct_data near bl_tree[2 * BL_CODES + 1];
2125
2126 /* Huffman tree for the bit lengths */
2127
2128 typedef struct tree_desc {
2129         ct_data near *dyn_tree;         /* the dynamic tree */
2130         ct_data near *static_tree;      /* corresponding static tree or NULL */
2131         int near *extra_bits;           /* extra bits for each code or NULL */
2132         int extra_base;                         /* base index for extra_bits */
2133         int elems;                                      /* max number of elements in the tree */
2134         int max_length;                         /* max bit length for the codes */
2135         int max_code;                           /* largest code with non zero frequency */
2136 } tree_desc;
2137
2138 local tree_desc near l_desc =
2139         { dyn_ltree, static_ltree, extra_lbits, LITERALS + 1, L_CODES,
2140                 MAX_BITS, 0 };
2141
2142 local tree_desc near d_desc =
2143         { dyn_dtree, static_dtree, extra_dbits, 0, D_CODES, MAX_BITS, 0 };
2144
2145 local tree_desc near bl_desc =
2146         { bl_tree, (ct_data near *) 0, extra_blbits, 0, BL_CODES, MAX_BL_BITS,
2147                 0 };
2148
2149
2150 local ush near bl_count[MAX_BITS + 1];
2151
2152 /* number of codes at each bit length for an optimal tree */
2153
2154 local uch near bl_order[BL_CODES]
2155 = { 16, 17, 18, 0, 8, 7, 9, 6, 10, 5, 11, 4, 12, 3, 13, 2, 14, 1, 15 };
2156
2157 /* The lengths of the bit length codes are sent in order of decreasing
2158  * probability, to avoid transmitting the lengths for unused bit length codes.
2159  */
2160
2161 local int near heap[2 * L_CODES + 1];   /* heap used to build the Huffman trees */
2162 local int heap_len;                             /* number of elements in the heap */
2163 local int heap_max;                             /* element of largest frequency */
2164
2165 /* The sons of heap[n] are heap[2*n] and heap[2*n+1]. heap[0] is not used.
2166  * The same heap array is used to build all trees.
2167  */
2168
2169 local uch near depth[2 * L_CODES + 1];
2170
2171 /* Depth of each subtree used as tie breaker for trees of equal frequency */
2172
2173 local uch length_code[MAX_MATCH - MIN_MATCH + 1];
2174
2175 /* length code for each normalized match length (0 == MIN_MATCH) */
2176
2177 local uch dist_code[512];
2178
2179 /* distance codes. The first 256 values correspond to the distances
2180  * 3 .. 258, the last 256 values correspond to the top 8 bits of
2181  * the 15 bit distances.
2182  */
2183
2184 local int near base_length[LENGTH_CODES];
2185
2186 /* First normalized length for each code (0 = MIN_MATCH) */
2187
2188 local int near base_dist[D_CODES];
2189
2190 /* First normalized distance for each code (0 = distance of 1) */
2191
2192 #define l_buf inbuf
2193 /* DECLARE(uch, l_buf, LIT_BUFSIZE);  buffer for literals or lengths */
2194
2195 /* DECLARE(ush, d_buf, DIST_BUFSIZE); buffer for distances */
2196
2197 local uch near flag_buf[(LIT_BUFSIZE / 8)];
2198
2199 /* flag_buf is a bit array distinguishing literals from lengths in
2200  * l_buf, thus indicating the presence or absence of a distance.
2201  */
2202
2203 local unsigned last_lit;                /* running index in l_buf */
2204 local unsigned last_dist;               /* running index in d_buf */
2205 local unsigned last_flags;              /* running index in flag_buf */
2206 local uch flags;                                /* current flags not yet saved in flag_buf */
2207 local uch flag_bit;                             /* current bit used in flags */
2208
2209 /* bits are filled in flags starting at bit 0 (least significant).
2210  * Note: these flags are overkill in the current code since we don't
2211  * take advantage of DIST_BUFSIZE == LIT_BUFSIZE.
2212  */
2213
2214 local ulg opt_len;                              /* bit length of current block with optimal trees */
2215 local ulg static_len;                   /* bit length of current block with static trees */
2216
2217 local ulg compressed_len;               /* total bit length of compressed file */
2218
2219 local ulg input_len;                    /* total byte length of input file */
2220
2221 /* input_len is for debugging only since we can get it by other means. */
2222
2223 ush *file_type;                                 /* pointer to UNKNOWN, BINARY or ASCII */
2224 int *file_method;                               /* pointer to DEFLATE or STORE */
2225
2226 #ifdef DEBUG
2227 extern ulg bits_sent;                   /* bit length of the compressed data */
2228 extern long isize;                              /* byte length of input file */
2229 #endif
2230
2231 extern long block_start;                /* window offset of current block */
2232 extern unsigned near strstart;  /* window offset of current string */
2233
2234 /* ===========================================================================
2235  * Local (static) routines in this file.
2236  */
2237
2238 local void init_block (void);
2239 local void pqdownheap (ct_data near * tree, int k);
2240 local void gen_bitlen (tree_desc near * desc);
2241 local void gen_codes (ct_data near * tree, int max_code);
2242 local void build_tree (tree_desc near * desc);
2243 local void scan_tree (ct_data near * tree, int max_code);
2244 local void send_tree (ct_data near * tree, int max_code);
2245 local int build_bl_tree (void);
2246 local void send_all_trees (int lcodes, int dcodes, int blcodes);
2247 local void compress_block (ct_data near * ltree, ct_data near * dtree);
2248 local void set_file_type (void);
2249
2250
2251 #ifndef DEBUG
2252 #  define send_code(c, tree) send_bits(tree[c].Code, tree[c].Len)
2253    /* Send a code of the given tree. c and tree must not have side effects */
2254
2255 #else                                                   /* DEBUG */
2256 #  define send_code(c, tree) \
2257      { if (verbose>1) fprintf(stderr,"\ncd %3d ",(c)); \
2258        send_bits(tree[c].Code, tree[c].Len); }
2259 #endif
2260
2261 #define d_code(dist) \
2262    ((dist) < 256 ? dist_code[dist] : dist_code[256+((dist)>>7)])
2263 /* Mapping from a distance to a distance code. dist is the distance - 1 and
2264  * must not have side effects. dist_code[256] and dist_code[257] are never
2265  * used.
2266  */
2267
2268 /* the arguments must not have side effects */
2269
2270 /* ===========================================================================
2271  * Allocate the match buffer, initialize the various tables and save the
2272  * location of the internal file attribute (ascii/binary) and method
2273  * (DEFLATE/STORE).
2274  */
2275 void ct_init(attr, methodp)
2276 ush *attr;                                              /* pointer to internal file attribute */
2277 int *methodp;                                   /* pointer to compression method */
2278 {
2279         int n;                                          /* iterates over tree elements */
2280         int bits;                                       /* bit counter */
2281         int length;                                     /* length value */
2282         int code;                                       /* code value */
2283         int dist;                                       /* distance index */
2284
2285         file_type = attr;
2286         file_method = methodp;
2287         compressed_len = input_len = 0L;
2288
2289         if (static_dtree[0].Len != 0)
2290                 return;                                 /* ct_init already called */
2291
2292         /* Initialize the mapping length (0..255) -> length code (0..28) */
2293         length = 0;
2294         for (code = 0; code < LENGTH_CODES - 1; code++) {
2295                 base_length[code] = length;
2296                 for (n = 0; n < (1 << extra_lbits[code]); n++) {
2297                         length_code[length++] = (uch) code;
2298                 }
2299         }
2300         Assert(length == 256, "ct_init: length != 256");
2301         /* Note that the length 255 (match length 258) can be represented
2302          * in two different ways: code 284 + 5 bits or code 285, so we
2303          * overwrite length_code[255] to use the best encoding:
2304          */
2305         length_code[length - 1] = (uch) code;
2306
2307         /* Initialize the mapping dist (0..32K) -> dist code (0..29) */
2308         dist = 0;
2309         for (code = 0; code < 16; code++) {
2310                 base_dist[code] = dist;
2311                 for (n = 0; n < (1 << extra_dbits[code]); n++) {
2312                         dist_code[dist++] = (uch) code;
2313                 }
2314         }
2315         Assert(dist == 256, "ct_init: dist != 256");
2316         dist >>= 7;                                     /* from now on, all distances are divided by 128 */
2317         for (; code < D_CODES; code++) {
2318                 base_dist[code] = dist << 7;
2319                 for (n = 0; n < (1 << (extra_dbits[code] - 7)); n++) {
2320                         dist_code[256 + dist++] = (uch) code;
2321                 }
2322         }
2323         Assert(dist == 256, "ct_init: 256+dist != 512");
2324
2325         /* Construct the codes of the static literal tree */
2326         for (bits = 0; bits <= MAX_BITS; bits++)
2327                 bl_count[bits] = 0;
2328         n = 0;
2329         while (n <= 143)
2330                 static_ltree[n++].Len = 8, bl_count[8]++;
2331         while (n <= 255)
2332                 static_ltree[n++].Len = 9, bl_count[9]++;
2333         while (n <= 279)
2334                 static_ltree[n++].Len = 7, bl_count[7]++;
2335         while (n <= 287)
2336                 static_ltree[n++].Len = 8, bl_count[8]++;
2337         /* Codes 286 and 287 do not exist, but we must include them in the
2338          * tree construction to get a canonical Huffman tree (longest code
2339          * all ones)
2340          */
2341         gen_codes((ct_data near *) static_ltree, L_CODES + 1);
2342
2343         /* The static distance tree is trivial: */
2344         for (n = 0; n < D_CODES; n++) {
2345                 static_dtree[n].Len = 5;
2346                 static_dtree[n].Code = bi_reverse(n, 5);
2347         }
2348
2349         /* Initialize the first block of the first file: */
2350         init_block();
2351 }
2352
2353 /* ===========================================================================
2354  * Initialize a new block.
2355  */
2356 local void init_block()
2357 {
2358         int n;                                          /* iterates over tree elements */
2359
2360         /* Initialize the trees. */
2361         for (n = 0; n < L_CODES; n++)
2362                 dyn_ltree[n].Freq = 0;
2363         for (n = 0; n < D_CODES; n++)
2364                 dyn_dtree[n].Freq = 0;
2365         for (n = 0; n < BL_CODES; n++)
2366                 bl_tree[n].Freq = 0;
2367
2368         dyn_ltree[END_BLOCK].Freq = 1;
2369         opt_len = static_len = 0L;
2370         last_lit = last_dist = last_flags = 0;
2371         flags = 0;
2372         flag_bit = 1;
2373 }
2374
2375 #define SMALLEST 1
2376 /* Index within the heap array of least frequent node in the Huffman tree */
2377
2378
2379 /* ===========================================================================
2380  * Remove the smallest element from the heap and recreate the heap with
2381  * one less element. Updates heap and heap_len.
2382  */
2383 #define pqremove(tree, top) \
2384 {\
2385     top = heap[SMALLEST]; \
2386     heap[SMALLEST] = heap[heap_len--]; \
2387     pqdownheap(tree, SMALLEST); \
2388 }
2389
2390 /* ===========================================================================
2391  * Compares to subtrees, using the tree depth as tie breaker when
2392  * the subtrees have equal frequency. This minimizes the worst case length.
2393  */
2394 #define smaller(tree, n, m) \
2395    (tree[n].Freq < tree[m].Freq || \
2396    (tree[n].Freq == tree[m].Freq && depth[n] <= depth[m]))
2397
2398 /* ===========================================================================
2399  * Restore the heap property by moving down the tree starting at node k,
2400  * exchanging a node with the smallest of its two sons if necessary, stopping
2401  * when the heap property is re-established (each father smaller than its
2402  * two sons).
2403  */
2404 local void pqdownheap(tree, k)
2405 ct_data near *tree;                             /* the tree to restore */
2406 int k;                                                  /* node to move down */
2407 {
2408         int v = heap[k];
2409         int j = k << 1;                         /* left son of k */
2410
2411         while (j <= heap_len) {
2412                 /* Set j to the smallest of the two sons: */
2413                 if (j < heap_len && smaller(tree, heap[j + 1], heap[j]))
2414                         j++;
2415
2416                 /* Exit if v is smaller than both sons */
2417                 if (smaller(tree, v, heap[j]))
2418                         break;
2419
2420                 /* Exchange v with the smallest son */
2421                 heap[k] = heap[j];
2422                 k = j;
2423
2424                 /* And continue down the tree, setting j to the left son of k */
2425                 j <<= 1;
2426         }
2427         heap[k] = v;
2428 }
2429
2430 /* ===========================================================================
2431  * Compute the optimal bit lengths for a tree and update the total bit length
2432  * for the current block.
2433  * IN assertion: the fields freq and dad are set, heap[heap_max] and
2434  *    above are the tree nodes sorted by increasing frequency.
2435  * OUT assertions: the field len is set to the optimal bit length, the
2436  *     array bl_count contains the frequencies for each bit length.
2437  *     The length opt_len is updated; static_len is also updated if stree is
2438  *     not null.
2439  */
2440 local void gen_bitlen(desc)
2441 tree_desc near *desc;                   /* the tree descriptor */
2442 {
2443         ct_data near *tree = desc->dyn_tree;
2444         int near *extra = desc->extra_bits;
2445         int base = desc->extra_base;
2446         int max_code = desc->max_code;
2447         int max_length = desc->max_length;
2448         ct_data near *stree = desc->static_tree;
2449         int h;                                          /* heap index */
2450         int n, m;                                       /* iterate over the tree elements */
2451         int bits;                                       /* bit length */
2452         int xbits;                                      /* extra bits */
2453         ush f;                                          /* frequency */
2454         int overflow = 0;                       /* number of elements with bit length too large */
2455
2456         for (bits = 0; bits <= MAX_BITS; bits++)
2457                 bl_count[bits] = 0;
2458
2459         /* In a first pass, compute the optimal bit lengths (which may
2460          * overflow in the case of the bit length tree).
2461          */
2462         tree[heap[heap_max]].Len = 0;   /* root of the heap */
2463
2464         for (h = heap_max + 1; h < HEAP_SIZE; h++) {
2465                 n = heap[h];
2466                 bits = tree[tree[n].Dad].Len + 1;
2467                 if (bits > max_length)
2468                         bits = max_length, overflow++;
2469                 tree[n].Len = (ush) bits;
2470                 /* We overwrite tree[n].Dad which is no longer needed */
2471
2472                 if (n > max_code)
2473                         continue;                       /* not a leaf node */
2474
2475                 bl_count[bits]++;
2476                 xbits = 0;
2477                 if (n >= base)
2478                         xbits = extra[n - base];
2479                 f = tree[n].Freq;
2480                 opt_len += (ulg) f *(bits + xbits);
2481
2482                 if (stree)
2483                         static_len += (ulg) f *(stree[n].Len + xbits);
2484         }
2485         if (overflow == 0)
2486                 return;
2487
2488         Trace((stderr, "\nbit length overflow\n"));
2489         /* This happens for example on obj2 and pic of the Calgary corpus */
2490
2491         /* Find the first bit length which could increase: */
2492         do {
2493                 bits = max_length - 1;
2494                 while (bl_count[bits] == 0)
2495                         bits--;
2496                 bl_count[bits]--;               /* move one leaf down the tree */
2497                 bl_count[bits + 1] += 2;        /* move one overflow item as its brother */
2498                 bl_count[max_length]--;
2499                 /* The brother of the overflow item also moves one step up,
2500                  * but this does not affect bl_count[max_length]
2501                  */
2502                 overflow -= 2;
2503         } while (overflow > 0);
2504
2505         /* Now recompute all bit lengths, scanning in increasing frequency.
2506          * h is still equal to HEAP_SIZE. (It is simpler to reconstruct all
2507          * lengths instead of fixing only the wrong ones. This idea is taken
2508          * from 'ar' written by Haruhiko Okumura.)
2509          */
2510         for (bits = max_length; bits != 0; bits--) {
2511                 n = bl_count[bits];
2512                 while (n != 0) {
2513                         m = heap[--h];
2514                         if (m > max_code)
2515                                 continue;
2516                         if (tree[m].Len != (unsigned) bits) {
2517                                 Trace(
2518                                           (stderr, "code %d bits %d->%d\n", m, tree[m].Len,
2519                                            bits));
2520                                 opt_len +=
2521                                         ((long) bits -
2522                                          (long) tree[m].Len) * (long) tree[m].Freq;
2523                                 tree[m].Len = (ush) bits;
2524                         }
2525                         n--;
2526                 }
2527         }
2528 }
2529
2530 /* ===========================================================================
2531  * Generate the codes for a given tree and bit counts (which need not be
2532  * optimal).
2533  * IN assertion: the array bl_count contains the bit length statistics for
2534  * the given tree and the field len is set for all tree elements.
2535  * OUT assertion: the field code is set for all tree elements of non
2536  *     zero code length.
2537  */
2538 local void gen_codes(tree, max_code)
2539 ct_data near *tree;                             /* the tree to decorate */
2540 int max_code;                                   /* largest code with non zero frequency */
2541 {
2542         ush next_code[MAX_BITS + 1];    /* next code value for each bit length */
2543         ush code = 0;                           /* running code value */
2544         int bits;                                       /* bit index */
2545         int n;                                          /* code index */
2546
2547         /* The distribution counts are first used to generate the code values
2548          * without bit reversal.
2549          */
2550         for (bits = 1; bits <= MAX_BITS; bits++) {
2551                 next_code[bits] = code = (code + bl_count[bits - 1]) << 1;
2552         }
2553         /* Check that the bit counts in bl_count are consistent. The last code
2554          * must be all ones.
2555          */
2556         Assert(code + bl_count[MAX_BITS] - 1 == (1 << MAX_BITS) - 1,
2557                    "inconsistent bit counts");
2558         Tracev((stderr, "\ngen_codes: max_code %d ", max_code));
2559
2560         for (n = 0; n <= max_code; n++) {
2561                 int len = tree[n].Len;
2562
2563                 if (len == 0)
2564                         continue;
2565                 /* Now reverse the bits */
2566                 tree[n].Code = bi_reverse(next_code[len]++, len);
2567
2568                 Tracec(tree != static_ltree,
2569                            (stderr, "\nn %3d %c l %2d c %4x (%x) ", n,
2570                                 (isgraph(n) ? n : ' '), len, tree[n].Code,
2571                                 next_code[len] - 1));
2572         }
2573 }
2574
2575 /* ===========================================================================
2576  * Construct one Huffman tree and assigns the code bit strings and lengths.
2577  * Update the total bit length for the current block.
2578  * IN assertion: the field freq is set for all tree elements.
2579  * OUT assertions: the fields len and code are set to the optimal bit length
2580  *     and corresponding code. The length opt_len is updated; static_len is
2581  *     also updated if stree is not null. The field max_code is set.
2582  */
2583 local void build_tree(desc)
2584 tree_desc near *desc;                   /* the tree descriptor */
2585 {
2586         ct_data near *tree = desc->dyn_tree;
2587         ct_data near *stree = desc->static_tree;
2588         int elems = desc->elems;
2589         int n, m;                                       /* iterate over heap elements */
2590         int max_code = -1;                      /* largest code with non zero frequency */
2591         int node = elems;                       /* next internal node of the tree */
2592
2593         /* Construct the initial heap, with least frequent element in
2594          * heap[SMALLEST]. The sons of heap[n] are heap[2*n] and heap[2*n+1].
2595          * heap[0] is not used.
2596          */
2597         heap_len = 0, heap_max = HEAP_SIZE;
2598
2599         for (n = 0; n < elems; n++) {
2600                 if (tree[n].Freq != 0) {
2601                         heap[++heap_len] = max_code = n;
2602                         depth[n] = 0;
2603                 } else {
2604                         tree[n].Len = 0;
2605                 }
2606         }
2607
2608         /* The pkzip format requires that at least one distance code exists,
2609          * and that at least one bit should be sent even if there is only one
2610          * possible code. So to avoid special checks later on we force at least
2611          * two codes of non zero frequency.
2612          */
2613         while (heap_len < 2) {
2614                 int new = heap[++heap_len] = (max_code < 2 ? ++max_code : 0);
2615
2616                 tree[new].Freq = 1;
2617                 depth[new] = 0;
2618                 opt_len--;
2619                 if (stree)
2620                         static_len -= stree[new].Len;
2621                 /* new is 0 or 1 so it does not have extra bits */
2622         }
2623         desc->max_code = max_code;
2624
2625         /* The elements heap[heap_len/2+1 .. heap_len] are leaves of the tree,
2626          * establish sub-heaps of increasing lengths:
2627          */
2628         for (n = heap_len / 2; n >= 1; n--)
2629                 pqdownheap(tree, n);
2630
2631         /* Construct the Huffman tree by repeatedly combining the least two
2632          * frequent nodes.
2633          */
2634         do {
2635                 pqremove(tree, n);              /* n = node of least frequency */
2636                 m = heap[SMALLEST];             /* m = node of next least frequency */
2637
2638                 heap[--heap_max] = n;   /* keep the nodes sorted by frequency */
2639                 heap[--heap_max] = m;
2640
2641                 /* Create a new node father of n and m */
2642                 tree[node].Freq = tree[n].Freq + tree[m].Freq;
2643                 depth[node] = (uch) (MAX(depth[n], depth[m]) + 1);
2644                 tree[n].Dad = tree[m].Dad = (ush) node;
2645 #ifdef DUMP_BL_TREE
2646                 if (tree == bl_tree) {
2647                         fprintf(stderr, "\nnode %d(%d), sons %d(%d) %d(%d)",
2648                                         node, tree[node].Freq, n, tree[n].Freq, m,
2649                                         tree[m].Freq);
2650                 }
2651 #endif
2652                 /* and insert the new node in the heap */
2653                 heap[SMALLEST] = node++;
2654                 pqdownheap(tree, SMALLEST);
2655
2656         } while (heap_len >= 2);
2657
2658         heap[--heap_max] = heap[SMALLEST];
2659
2660         /* At this point, the fields freq and dad are set. We can now
2661          * generate the bit lengths.
2662          */
2663         gen_bitlen((tree_desc near *) desc);
2664
2665         /* The field len is now set, we can generate the bit codes */
2666         gen_codes((ct_data near *) tree, max_code);
2667 }
2668
2669 /* ===========================================================================
2670  * Scan a literal or distance tree to determine the frequencies of the codes
2671  * in the bit length tree. Updates opt_len to take into account the repeat
2672  * counts. (The contribution of the bit length codes will be added later
2673  * during the construction of bl_tree.)
2674  */
2675 local void scan_tree(tree, max_code)
2676 ct_data near *tree;                             /* the tree to be scanned */
2677 int max_code;                                   /* and its largest code of non zero frequency */
2678 {
2679         int n;                                          /* iterates over all tree elements */
2680         int prevlen = -1;                       /* last emitted length */
2681         int curlen;                                     /* length of current code */
2682         int nextlen = tree[0].Len;      /* length of next code */
2683         int count = 0;                          /* repeat count of the current code */
2684         int max_count = 7;                      /* max repeat count */
2685         int min_count = 4;                      /* min repeat count */
2686
2687         if (nextlen == 0)
2688                 max_count = 138, min_count = 3;
2689         tree[max_code + 1].Len = (ush) 0xffff;  /* guard */
2690
2691         for (n = 0; n <= max_code; n++) {
2692                 curlen = nextlen;
2693                 nextlen = tree[n + 1].Len;
2694                 if (++count < max_count && curlen == nextlen) {
2695                         continue;
2696                 } else if (count < min_count) {
2697                         bl_tree[curlen].Freq += count;
2698                 } else if (curlen != 0) {
2699                         if (curlen != prevlen)
2700                                 bl_tree[curlen].Freq++;
2701                         bl_tree[REP_3_6].Freq++;
2702                 } else if (count <= 10) {
2703                         bl_tree[REPZ_3_10].Freq++;
2704                 } else {
2705                         bl_tree[REPZ_11_138].Freq++;
2706                 }
2707                 count = 0;
2708                 prevlen = curlen;
2709                 if (nextlen == 0) {
2710                         max_count = 138, min_count = 3;
2711                 } else if (curlen == nextlen) {
2712                         max_count = 6, min_count = 3;
2713                 } else {
2714                         max_count = 7, min_count = 4;
2715                 }
2716         }
2717 }
2718
2719 /* ===========================================================================
2720  * Send a literal or distance tree in compressed form, using the codes in
2721  * bl_tree.
2722  */
2723 local void send_tree(tree, max_code)
2724 ct_data near *tree;                             /* the tree to be scanned */
2725 int max_code;                                   /* and its largest code of non zero frequency */
2726 {
2727         int n;                                          /* iterates over all tree elements */
2728         int prevlen = -1;                       /* last emitted length */
2729         int curlen;                                     /* length of current code */
2730         int nextlen = tree[0].Len;      /* length of next code */
2731         int count = 0;                          /* repeat count of the current code */
2732         int max_count = 7;                      /* max repeat count */
2733         int min_count = 4;                      /* min repeat count */
2734
2735 /* tree[max_code+1].Len = -1; *//* guard already set */
2736         if (nextlen == 0)
2737                 max_count = 138, min_count = 3;
2738
2739         for (n = 0; n <= max_code; n++) {
2740                 curlen = nextlen;
2741                 nextlen = tree[n + 1].Len;
2742                 if (++count < max_count && curlen == nextlen) {
2743                         continue;
2744                 } else if (count < min_count) {
2745                         do {
2746                                 send_code(curlen, bl_tree);
2747                         } while (--count != 0);
2748
2749                 } else if (curlen != 0) {
2750                         if (curlen != prevlen) {
2751                                 send_code(curlen, bl_tree);
2752                                 count--;
2753                         }
2754                         Assert(count >= 3 && count <= 6, " 3_6?");
2755                         send_code(REP_3_6, bl_tree);
2756                         send_bits(count - 3, 2);
2757
2758                 } else if (count <= 10) {
2759                         send_code(REPZ_3_10, bl_tree);
2760                         send_bits(count - 3, 3);
2761
2762                 } else {
2763                         send_code(REPZ_11_138, bl_tree);
2764                         send_bits(count - 11, 7);
2765                 }
2766                 count = 0;
2767                 prevlen = curlen;
2768                 if (nextlen == 0) {
2769                         max_count = 138, min_count = 3;
2770                 } else if (curlen == nextlen) {
2771                         max_count = 6, min_count = 3;
2772                 } else {
2773                         max_count = 7, min_count = 4;
2774                 }
2775         }
2776 }
2777
2778 /* ===========================================================================
2779  * Construct the Huffman tree for the bit lengths and return the index in
2780  * bl_order of the last bit length code to send.
2781  */
2782 local int build_bl_tree()
2783 {
2784         int max_blindex;                        /* index of last bit length code of non zero freq */
2785
2786         /* Determine the bit length frequencies for literal and distance trees */
2787         scan_tree((ct_data near *) dyn_ltree, l_desc.max_code);
2788         scan_tree((ct_data near *) dyn_dtree, d_desc.max_code);
2789
2790         /* Build the bit length tree: */
2791         build_tree((tree_desc near *) (&bl_desc));
2792         /* opt_len now includes the length of the tree representations, except
2793          * the lengths of the bit lengths codes and the 5+5+4 bits for the counts.
2794          */
2795
2796         /* Determine the number of bit length codes to send. The pkzip format
2797          * requires that at least 4 bit length codes be sent. (appnote.txt says
2798          * 3 but the actual value used is 4.)
2799          */
2800         for (max_blindex = BL_CODES - 1; max_blindex >= 3; max_blindex--) {
2801                 if (bl_tree[bl_order[max_blindex]].Len != 0)
2802                         break;
2803         }
2804         /* Update opt_len to include the bit length tree and counts */
2805         opt_len += 3 * (max_blindex + 1) + 5 + 5 + 4;
2806         Tracev(
2807                    (stderr, "\ndyn trees: dyn %ld, stat %ld", opt_len,
2808                         static_len));
2809
2810         return max_blindex;
2811 }
2812
2813 /* ===========================================================================
2814  * Send the header for a block using dynamic Huffman trees: the counts, the
2815  * lengths of the bit length codes, the literal tree and the distance tree.
2816  * IN assertion: lcodes >= 257, dcodes >= 1, blcodes >= 4.
2817  */
2818 local void send_all_trees(lcodes, dcodes, blcodes)
2819 int lcodes, dcodes, blcodes;    /* number of codes for each tree */
2820 {
2821         int rank;                                       /* index in bl_order */
2822
2823         Assert(lcodes >= 257 && dcodes >= 1
2824                    && blcodes >= 4, "not enough codes");
2825         Assert(lcodes <= L_CODES && dcodes <= D_CODES
2826                    && blcodes <= BL_CODES, "too many codes");
2827         Tracev((stderr, "\nbl counts: "));
2828         send_bits(lcodes - 257, 5);     /* not +255 as stated in appnote.txt */
2829         send_bits(dcodes - 1, 5);
2830         send_bits(blcodes - 4, 4);      /* not -3 as stated in appnote.txt */
2831         for (rank = 0; rank < blcodes; rank++) {
2832                 Tracev((stderr, "\nbl code %2d ", bl_order[rank]));
2833                 send_bits(bl_tree[bl_order[rank]].Len, 3);
2834         }
2835         Tracev((stderr, "\nbl tree: sent %ld", bits_sent));
2836
2837         send_tree((ct_data near *) dyn_ltree, lcodes - 1);      /* send the literal tree */
2838         Tracev((stderr, "\nlit tree: sent %ld", bits_sent));
2839
2840         send_tree((ct_data near *) dyn_dtree, dcodes - 1);      /* send the distance tree */
2841         Tracev((stderr, "\ndist tree: sent %ld", bits_sent));
2842 }
2843
2844 /* ===========================================================================
2845  * Determine the best encoding for the current block: dynamic trees, static
2846  * trees or store, and output the encoded block to the zip file. This function
2847  * returns the total compressed length for the file so far.
2848  */
2849 ulg flush_block(buf, stored_len, eof)
2850 char *buf;                                              /* input block, or NULL if too old */
2851 ulg stored_len;                                 /* length of input block */
2852 int eof;                                                /* true if this is the last block for a file */
2853 {
2854         ulg opt_lenb, static_lenb;      /* opt_len and static_len in bytes */
2855         int max_blindex;                        /* index of last bit length code of non zero freq */
2856
2857         flag_buf[last_flags] = flags;   /* Save the flags for the last 8 items */
2858
2859         /* Check if the file is ascii or binary */
2860         if (*file_type == (ush) UNKNOWN)
2861                 set_file_type();
2862
2863         /* Construct the literal and distance trees */
2864         build_tree((tree_desc near *) (&l_desc));
2865         Tracev((stderr, "\nlit data: dyn %ld, stat %ld", opt_len, static_len));
2866
2867         build_tree((tree_desc near *) (&d_desc));
2868         Tracev(
2869                    (stderr, "\ndist data: dyn %ld, stat %ld", opt_len,
2870                         static_len));
2871         /* At this point, opt_len and static_len are the total bit lengths of
2872          * the compressed block data, excluding the tree representations.
2873          */
2874
2875         /* Build the bit length tree for the above two trees, and get the index
2876          * in bl_order of the last bit length code to send.
2877          */
2878         max_blindex = build_bl_tree();
2879
2880         /* Determine the best encoding. Compute first the block length in bytes */
2881         opt_lenb = (opt_len + 3 + 7) >> 3;
2882         static_lenb = (static_len + 3 + 7) >> 3;
2883         input_len += stored_len;        /* for debugging only */
2884
2885         Trace(
2886                   (stderr,
2887                    "\nopt %lu(%lu) stat %lu(%lu) stored %lu lit %u dist %u ",
2888                    opt_lenb, opt_len, static_lenb, static_len, stored_len,
2889                    last_lit, last_dist));
2890
2891         if (static_lenb <= opt_lenb)
2892                 opt_lenb = static_lenb;
2893
2894         /* If compression failed and this is the first and last block,
2895          * and if the zip file can be seeked (to rewrite the local header),
2896          * the whole file is transformed into a stored file:
2897          */
2898 #ifdef FORCE_METHOD
2899 #else
2900         if (stored_len <= opt_lenb && eof && compressed_len == 0L
2901                 && seekable()) {
2902 #endif
2903                 /* Since LIT_BUFSIZE <= 2*WSIZE, the input data must be there: */
2904                 if (buf == (char *) 0)
2905                         error_msg("block vanished\n");
2906
2907                 copy_block(buf, (unsigned) stored_len, 0);      /* without header */
2908                 compressed_len = stored_len << 3;
2909                 *file_method = STORED;
2910
2911 #ifdef FORCE_METHOD
2912 #else
2913         } else if (stored_len + 4 <= opt_lenb && buf != (char *) 0) {
2914                 /* 4: two words for the lengths */
2915 #endif
2916                 /* The test buf != NULL is only necessary if LIT_BUFSIZE > WSIZE.
2917                  * Otherwise we can't have processed more than WSIZE input bytes since
2918                  * the last block flush, because compression would have been
2919                  * successful. If LIT_BUFSIZE <= WSIZE, it is never too late to
2920                  * transform a block into a stored block.
2921                  */
2922                 send_bits((STORED_BLOCK << 1) + eof, 3);        /* send block type */
2923                 compressed_len = (compressed_len + 3 + 7) & ~7L;
2924                 compressed_len += (stored_len + 4) << 3;
2925
2926                 copy_block(buf, (unsigned) stored_len, 1);      /* with header */
2927
2928 #ifdef FORCE_METHOD
2929 #else
2930         } else if (static_lenb == opt_lenb) {
2931 #endif
2932                 send_bits((STATIC_TREES << 1) + eof, 3);
2933                 compress_block((ct_data near *) static_ltree,
2934                                            (ct_data near *) static_dtree);
2935                 compressed_len += 3 + static_len;
2936         } else {
2937                 send_bits((DYN_TREES << 1) + eof, 3);
2938                 send_all_trees(l_desc.max_code + 1, d_desc.max_code + 1,
2939                                            max_blindex + 1);
2940                 compress_block((ct_data near *) dyn_ltree,
2941                                            (ct_data near *) dyn_dtree);
2942                 compressed_len += 3 + opt_len;
2943         }
2944         Assert(compressed_len == bits_sent, "bad compressed size");
2945         init_block();
2946
2947         if (eof) {
2948                 Assert(input_len == isize, "bad input size");
2949                 bi_windup();
2950                 compressed_len += 7;    /* align on byte boundary */
2951         }
2952         Tracev((stderr, "\ncomprlen %lu(%lu) ", compressed_len >> 3,
2953                         compressed_len - 7 * eof));
2954
2955         return compressed_len >> 3;
2956 }
2957
2958 /* ===========================================================================
2959  * Save the match info and tally the frequency counts. Return true if
2960  * the current block must be flushed.
2961  */
2962 int ct_tally(dist, lc)
2963 int dist;                                               /* distance of matched string */
2964 int lc;                                                 /* match length-MIN_MATCH or unmatched char (if dist==0) */
2965 {
2966         l_buf[last_lit++] = (uch) lc;
2967         if (dist == 0) {
2968                 /* lc is the unmatched char */
2969                 dyn_ltree[lc].Freq++;
2970         } else {
2971                 /* Here, lc is the match length - MIN_MATCH */
2972                 dist--;                                 /* dist = match distance - 1 */
2973                 Assert((ush) dist < (ush) MAX_DIST &&
2974                            (ush) lc <= (ush) (MAX_MATCH - MIN_MATCH) &&
2975                            (ush) d_code(dist) < (ush) D_CODES, "ct_tally: bad match");
2976
2977                 dyn_ltree[length_code[lc] + LITERALS + 1].Freq++;
2978                 dyn_dtree[d_code(dist)].Freq++;
2979
2980                 d_buf[last_dist++] = (ush) dist;
2981                 flags |= flag_bit;
2982         }
2983         flag_bit <<= 1;
2984
2985         /* Output the flags if they fill a byte: */
2986         if ((last_lit & 7) == 0) {
2987                 flag_buf[last_flags++] = flags;
2988                 flags = 0, flag_bit = 1;
2989         }
2990         /* Try to guess if it is profitable to stop the current block here */
2991         if ((last_lit & 0xfff) == 0) {
2992                 /* Compute an upper bound for the compressed length */
2993                 ulg out_length = (ulg) last_lit * 8L;
2994                 ulg in_length = (ulg) strstart - block_start;
2995                 int dcode;
2996
2997                 for (dcode = 0; dcode < D_CODES; dcode++) {
2998                         out_length +=
2999                                 (ulg) dyn_dtree[dcode].Freq * (5L + extra_dbits[dcode]);
3000                 }
3001                 out_length >>= 3;
3002                 Trace(
3003                           (stderr,
3004                            "\nlast_lit %u, last_dist %u, in %ld, out ~%ld(%ld%%) ",
3005                            last_lit, last_dist, in_length, out_length,
3006                            100L - out_length * 100L / in_length));
3007                 if (last_dist < last_lit / 2 && out_length < in_length / 2)
3008                         return 1;
3009         }
3010         return (last_lit == LIT_BUFSIZE - 1 || last_dist == DIST_BUFSIZE);
3011         /* We avoid equality with LIT_BUFSIZE because of wraparound at 64K
3012          * on 16 bit machines and because stored blocks are restricted to
3013          * 64K-1 bytes.
3014          */
3015 }
3016
3017 /* ===========================================================================
3018  * Send the block data compressed using the given Huffman trees
3019  */
3020 local void compress_block(ltree, dtree)
3021 ct_data near *ltree;                    /* literal tree */
3022 ct_data near *dtree;                    /* distance tree */
3023 {
3024         unsigned dist;                          /* distance of matched string */
3025         int lc;                                         /* match length or unmatched char (if dist == 0) */
3026         unsigned lx = 0;                        /* running index in l_buf */
3027         unsigned dx = 0;                        /* running index in d_buf */
3028         unsigned fx = 0;                        /* running index in flag_buf */
3029         uch flag = 0;                           /* current flags */
3030         unsigned code;                          /* the code to send */
3031         int extra;                                      /* number of extra bits to send */
3032
3033         if (last_lit != 0)
3034                 do {
3035                         if ((lx & 7) == 0)
3036                                 flag = flag_buf[fx++];
3037                         lc = l_buf[lx++];
3038                         if ((flag & 1) == 0) {
3039                                 send_code(lc, ltree);   /* send a literal byte */
3040                                 Tracecv(isgraph(lc), (stderr, " '%c' ", lc));
3041                         } else {
3042                                 /* Here, lc is the match length - MIN_MATCH */
3043                                 code = length_code[lc];
3044                                 send_code(code + LITERALS + 1, ltree);  /* send the length code */
3045                                 extra = extra_lbits[code];
3046                                 if (extra != 0) {
3047                                         lc -= base_length[code];
3048                                         send_bits(lc, extra);   /* send the extra length bits */
3049                                 }
3050                                 dist = d_buf[dx++];
3051                                 /* Here, dist is the match distance - 1 */
3052                                 code = d_code(dist);
3053                                 Assert(code < D_CODES, "bad d_code");
3054
3055                                 send_code(code, dtree); /* send the distance code */
3056                                 extra = extra_dbits[code];
3057                                 if (extra != 0) {
3058                                         dist -= base_dist[code];
3059                                         send_bits(dist, extra); /* send the extra distance bits */
3060                                 }
3061                         }                                       /* literal or match pair ? */
3062                         flag >>= 1;
3063                 } while (lx < last_lit);
3064
3065         send_code(END_BLOCK, ltree);
3066 }
3067
3068 /* ===========================================================================
3069  * Set the file type to ASCII or BINARY, using a crude approximation:
3070  * binary if more than 20% of the bytes are <= 6 or >= 128, ascii otherwise.
3071  * IN assertion: the fields freq of dyn_ltree are set and the total of all
3072  * frequencies does not exceed 64K (to fit in an int on 16 bit machines).
3073  */
3074 local void set_file_type()
3075 {
3076         int n = 0;
3077         unsigned ascii_freq = 0;
3078         unsigned bin_freq = 0;
3079
3080         while (n < 7)
3081                 bin_freq += dyn_ltree[n++].Freq;
3082         while (n < 128)
3083                 ascii_freq += dyn_ltree[n++].Freq;
3084         while (n < LITERALS)
3085                 bin_freq += dyn_ltree[n++].Freq;
3086         *file_type = bin_freq > (ascii_freq >> 2) ? BINARY : ASCII;
3087         if (*file_type == BINARY && translate_eol) {
3088                 error_msg("-l used on binary file\n");
3089         }
3090 }
3091
3092 /* util.c -- utility functions for gzip support
3093  * Copyright (C) 1992-1993 Jean-loup Gailly
3094  * This is free software; you can redistribute it and/or modify it under the
3095  * terms of the GNU General Public License, see the file COPYING.
3096  */
3097
3098 #include <ctype.h>
3099 #include <errno.h>
3100 #include <sys/types.h>
3101
3102 #ifdef HAVE_UNISTD_H
3103 #  include <unistd.h>
3104 #endif
3105 #ifndef NO_FCNTL_H
3106 #  include <fcntl.h>
3107 #endif
3108
3109 #if defined(STDC_HEADERS) || !defined(NO_STDLIB_H)
3110 #  include <stdlib.h>
3111 #else
3112 extern int errno;
3113 #endif
3114
3115 /* ===========================================================================
3116  * Copy input to output unchanged: zcat == cat with --force.
3117  * IN assertion: insize bytes have already been read in inbuf.
3118  */
3119 int copy(in, out)
3120 int in, out;                                    /* input and output file descriptors */
3121 {
3122         errno = 0;
3123         while (insize != 0 && (int) insize != EOF) {
3124                 write_buf(out, (char *) inbuf, insize);
3125                 bytes_out += insize;
3126                 insize = read(in, (char *) inbuf, INBUFSIZ);
3127         }
3128         if ((int) insize == EOF && errno != 0) {
3129                 read_error_msg();
3130         }
3131         bytes_in = bytes_out;
3132         return OK;
3133 }
3134
3135 /* ========================================================================
3136  * Put string s in lower case, return s.
3137  */
3138 char *strlwr(s)
3139 char *s;
3140 {
3141         char *t;
3142
3143         for (t = s; *t; t++)
3144                 *t = tolow(*t);
3145         return s;
3146 }
3147
3148 #if defined(NO_STRING_H) && !defined(STDC_HEADERS)
3149
3150 /* Provide missing strspn and strcspn functions. */
3151
3152 int strspn (const char *s, const char *accept);
3153 int strcspn (const char *s, const char *reject);
3154
3155 /* ========================================================================
3156  * Return the length of the maximum initial segment
3157  * of s which contains only characters in accept.
3158  */
3159 int strspn(s, accept)
3160 const char *s;
3161 const char *accept;
3162 {
3163         register const char *p;
3164         register const char *a;
3165         register int count = 0;
3166
3167         for (p = s; *p != '\0'; ++p) {
3168                 for (a = accept; *a != '\0'; ++a) {
3169                         if (*p == *a)
3170                                 break;
3171                 }
3172                 if (*a == '\0')
3173                         return count;
3174                 ++count;
3175         }
3176         return count;
3177 }
3178
3179 /* ========================================================================
3180  * Return the length of the maximum inital segment of s
3181  * which contains no characters from reject.
3182  */
3183 int strcspn(s, reject)
3184 const char *s;
3185 const char *reject;
3186 {
3187         register int count = 0;
3188
3189         while (*s != '\0') {
3190                 if (strchr(reject, *s++) != NULL)
3191                         return count;
3192                 ++count;
3193         }
3194         return count;
3195 }
3196
3197 #endif                                                  /* NO_STRING_H */
3198
3199 /* ========================================================================
3200  * Add an environment variable (if any) before argv, and update argc.
3201  * Return the expanded environment variable to be freed later, or NULL 
3202  * if no options were added to argv.
3203  */
3204 #define SEPARATOR       " \t"           /* separators in env variable */
3205
3206 char *add_envopt(argcp, argvp, env)
3207 int *argcp;                                             /* pointer to argc */
3208 char ***argvp;                                  /* pointer to argv */
3209 char *env;                                              /* name of environment variable */
3210 {
3211         char *p;                                        /* running pointer through env variable */
3212         char **oargv;                           /* runs through old argv array */
3213         char **nargv;                           /* runs through new argv array */
3214         int oargc = *argcp;                     /* old argc */
3215         int nargc = 0;                          /* number of arguments in env variable */
3216
3217         env = (char *) getenv(env);
3218         if (env == NULL)
3219                 return NULL;
3220
3221         p = (char *) xmalloc(strlen(env) + 1);
3222         env = strcpy(p, env);           /* keep env variable intact */
3223
3224         for (p = env; *p; nargc++) {    /* move through env */
3225                 p += strspn(p, SEPARATOR);      /* skip leading separators */
3226                 if (*p == '\0')
3227                         break;
3228
3229                 p += strcspn(p, SEPARATOR);     /* find end of word */
3230                 if (*p)
3231                         *p++ = '\0';            /* mark it */
3232         }
3233         if (nargc == 0) {
3234                 free(env);
3235                 return NULL;
3236         }
3237         *argcp += nargc;
3238         /* Allocate the new argv array, with an extra element just in case
3239          * the original arg list did not end with a NULL.
3240          */
3241         nargv = (char **) calloc(*argcp + 1, sizeof(char *));
3242
3243         if (nargv == NULL)
3244                 error_msg(memory_exhausted);
3245         oargv = *argvp;
3246         *argvp = nargv;
3247
3248         /* Copy the program name first */
3249         if (oargc-- < 0)
3250                 error_msg("argc<=0\n");
3251         *(nargv++) = *(oargv++);
3252
3253         /* Then copy the environment args */
3254         for (p = env; nargc > 0; nargc--) {
3255                 p += strspn(p, SEPARATOR);      /* skip separators */
3256                 *(nargv++) = p;                 /* store start */
3257                 while (*p++);                   /* skip over word */
3258         }
3259
3260         /* Finally copy the old args and add a NULL (usual convention) */
3261         while (oargc--)
3262                 *(nargv++) = *(oargv++);
3263         *nargv = NULL;
3264         return env;
3265 }
3266
3267 /* ========================================================================
3268  * Display compression ratio on the given stream on 6 characters.
3269  */
3270 void display_ratio(num, den, file)
3271 long num;
3272 long den;
3273 FILE *file;
3274 {
3275         long ratio;                                     /* 1000 times the compression ratio */
3276
3277         if (den == 0) {
3278                 ratio = 0;                              /* no compression */
3279         } else if (den < 2147483L) {    /* (2**31 -1)/1000 */
3280                 ratio = 1000L * num / den;
3281         } else {
3282                 ratio = num / (den / 1000L);
3283         }
3284         if (ratio < 0) {
3285                 putc('-', file);
3286                 ratio = -ratio;
3287         } else {
3288                 putc(' ', file);
3289         }
3290         fprintf(file, "%2ld.%1ld%%", ratio / 10L, ratio % 10L);
3291 }
3292
3293
3294 /* zip.c -- compress files to the gzip or pkzip format
3295  * Copyright (C) 1992-1993 Jean-loup Gailly
3296  * This is free software; you can redistribute it and/or modify it under the
3297  * terms of the GNU General Public License, see the file COPYING.
3298  */
3299
3300 #include <ctype.h>
3301 #include <sys/types.h>
3302
3303 #ifdef HAVE_UNISTD_H
3304 #  include <unistd.h>
3305 #endif
3306 #ifndef NO_FCNTL_H
3307 #  include <fcntl.h>
3308 #endif
3309
3310 local ulg crc;                                  /* crc on uncompressed file data */
3311 long header_bytes;                              /* number of bytes in gzip header */
3312
3313 /* ===========================================================================
3314  * Deflate in to out.
3315  * IN assertions: the input and output buffers are cleared.
3316  *   The variables time_stamp and save_orig_name are initialized.
3317  */
3318 int zip(in, out)
3319 int in, out;                                    /* input and output file descriptors */
3320 {
3321         uch flags = 0;                          /* general purpose bit flags */
3322         ush attr = 0;                           /* ascii/binary flag */
3323         ush deflate_flags = 0;          /* pkzip -es, -en or -ex equivalent */
3324
3325         ifd = in;
3326         ofd = out;
3327         outcnt = 0;
3328
3329         /* Write the header to the gzip file. See algorithm.doc for the format */
3330
3331
3332         method = DEFLATED;
3333         put_byte(GZIP_MAGIC[0]);        /* magic header */
3334         put_byte(GZIP_MAGIC[1]);
3335         put_byte(DEFLATED);                     /* compression method */
3336
3337         put_byte(flags);                        /* general flags */
3338         put_long(time_stamp);
3339
3340         /* Write deflated file to zip file */
3341         crc = updcrc(0, 0);
3342
3343         bi_init(out);
3344         ct_init(&attr, &method);
3345         lm_init(&deflate_flags);
3346
3347         put_byte((uch) deflate_flags);  /* extra flags */
3348         put_byte(OS_CODE);                      /* OS identifier */
3349
3350         header_bytes = (long) outcnt;
3351
3352         (void) deflate();
3353
3354         /* Write the crc and uncompressed size */
3355         put_long(crc);
3356         put_long(isize);
3357         header_bytes += 2 * sizeof(long);
3358
3359         flush_outbuf();
3360         return OK;
3361 }
3362
3363
3364 /* ===========================================================================
3365  * Read a new buffer from the current input file, perform end-of-line
3366  * translation, and update the crc and input file size.
3367  * IN assertion: size >= 2 (for end-of-line translation)
3368  */
3369 int file_read(buf, size)
3370 char *buf;
3371 unsigned size;
3372 {
3373         unsigned len;
3374
3375         Assert(insize == 0, "inbuf not empty");
3376
3377         len = read(ifd, buf, size);
3378         if (len == (unsigned) (-1) || len == 0)
3379                 return (int) len;
3380
3381         crc = updcrc((uch *) buf, len);
3382         isize += (ulg) len;
3383         return (int) len;
3384 }
3385
3386 /* ===========================================================================
3387  * Write the output buffer outbuf[0..outcnt-1] and update bytes_out.
3388  * (used for the compressed data only)
3389  */
3390 void flush_outbuf()
3391 {
3392         if (outcnt == 0)
3393                 return;
3394
3395         write_buf(ofd, (char *) outbuf, outcnt);
3396         bytes_out += (ulg) outcnt;
3397         outcnt = 0;
3398 }