tests: port list-big test to macOS 12.1
[gzip.git] / NEWS
blob95ffe49c87a3afc568bb0967b9025aaa0c1c0278
1 GNU gzip NEWS                                    -*- outline -*-
3 * Noteworthy changes in release ?.? (????-??-??) [?]
5 ** Changes in behavior
7   'gzip -l' no longer misreports file lengths 4 GiB and larger.
8   Previously, 'gzip -l' output the 32-bit value stored in the gzip
9   header even though that is the uncompressed length modulo 2**32.
10   Now, 'gzip -l' calculates the uncompressed length by decompressing
11   the data and counting the resulting bytes.  Although this can take
12   much more time, nowadays the correctness pros seem to outweigh the
13   performance cons.
15   'zless' is no longer installed on platforms lacking 'less'.
17 ** Bug fixes
19   'zdiff -C 5' no longer misbehaves by treating '5' as a file name.
22 * Noteworthy changes in release 1.11 (2021-09-03) [stable]
24 ** Performance improvements
26   IBM Z platforms now support hardware-accelerated deflation.
29 * Noteworthy changes in release 1.10 (2018-12-29) [stable]
31 ** Changes in behavior
33   Compressed gzip output no longer contains the current time as a
34   timestamp when the input is not a regular file.  Instead, the output
35   contains a null (zero) timestamp.  This makes gzip's behavior more
36   reproducible when used as part of a pipeline.  (As a reminder, even
37   regular files will use null timestamps after the year 2106, due to a
38   limitation in the gzip format.)
40 ** Bug fixes
42   A use of uninitialized memory on some malformed inputs has been fixed.
43   [bug present since the beginning]
45   A few theoretical race conditions in signal handers have been fixed.
46   These bugs most likely do not happen on practical platforms.
47   [bugs present since the beginning]
50 * Noteworthy changes in release 1.9 (2018-01-07) [stable]
52 ** Bug fixes
54   gzip -d -S SUFFIX file.SUFFIX would fail for any upper-case byte in SUFFIX.
55   E.g., before, this command would fail:
56     $ :|gzip > kT && gzip -d -S T kT
57     gzip: kT: unknown suffix -- ignored
58   [bug present since the beginning]
60   When decompressing data in 'pack' format, gzip no longer mishandles
61   leading zeros in the end-of-block code.  [bug introduced in gzip-1.6]
63   When converting from system-dependent time_t format to the 32-bit
64   unsigned MTIME format used in gzip files, if a timestamp does not
65   fit gzip now substitutes zero instead of the timestamp's low-order
66   32 bits, as per Internet RFC 1952.  When converting from MTIME to
67   time_t format, if a timestamp does not fit gzip now warns and
68   substitutes the nearest in-range value instead of crashing or
69   silently substituting an implementation-defined value (typically,
70   the timestamp's low-order bits).  This affects timestamps before
71   1970 and after 2106, and timestamps after 2038 on platforms with
72   32-bit signed time_t.  [bug present since the beginning]
74   Commands implemented via shell scripts are now more consistent about
75   failure status.  For example, 'gunzip --help >/dev/full' now
76   consistently exits with status 1 (error), instead of with status 2
77   (warning) on some platforms.  [bug present since the beginning]
79   Support for VMS and Amiga has been removed.  It was not working anyway,
80   and it reportedly caused file name glitches on MS-Windowsish platforms.
83 * Noteworthy changes in release 1.8 (2016-04-26) [stable]
85 ** Bug fixes
87   gzip -l no longer falsely reports a write error when writing to a pipe.
88   [bug introduced in gzip-1.7]
90   Port to Oracle Solaris Studio 12 on x86-64.
91   [bug present since at least gzip-1.2.4]
93   When configuring gzip, ./configure DEFS='...-DNO_ASM...' now
94   suppresses assembler again.  [bug introduced in gzip-1.3.5]
97 * Noteworthy changes in release 1.7 (2016-03-27) [stable]
99 ** Changes in behavior
101   The GZIP environment variable is now obsolescent; gzip now warns if
102   it is used, and rejects attempts to use dangerous options or operands.
103   You can use an alias or script instead.
105   Installed programs like 'zgrep' now use the PATH environment variable
106   as usual to find subsidiary programs like 'gzip' and 'grep'.
107   Previously they prepended the installation directory to the PATH,
108   which sometimes caused 'make check' to test the wrong gzip executable.
109   [bug introduced in gzip-1.3.13]
111 ** New features
113   gzip now accepts the --synchronous option, which causes it to use
114   fsync and similar primitives to transfer output data to the output
115   file's storage device when the file system supports this.  Although
116   this option makes gzip safer in the presence of system crashes, it
117   can make gzip considerably slower.
119   gzip now accepts the --rsyncable option. This option is accepted in
120   all modes, but has effect only when compressing: it makes the resulting
121   output more amenable to efficient use of rsync.  For example, when a
122   large input file gets a small change, a gzip --rsyncable image of
123   that file will remain largely unchanged, too.  Without --rsyncable,
124   even a tiny change in the input could result in a totally different
125   gzip-compressed output file.
127 ** Bug fixes
129   gzip -k -v no longer reports that files are replaced.
130   [bug present since the beginning]
132   zgrep -f A B C no longer reads A more than once if A is not a regular file.
133   This better supports invocations like 'zgrep -f <(COMMAND) B C' in Bash.
134   [bug introduced in gzip-1.2]
137 * Noteworthy changes in release 1.6 (2013-06-09) [stable]
139 ** New features
141   gzip now accepts the --keep (-k) option, for consistency with tools
142   like xz, lzip and bzip2.  With this option, gzip no longer removes
143   named input files when compressing or decompressing.
145 ** Bug fixes
147   gzip -d no longer malfunctions with certain invalid data in 'pack' format.
148   [bug introduced in gzip-0.8]
150   When overwriting, gzip no longer acts as if you typed "y" when you type "n",
151   on some platforms when compiled with optimization.
152   [bug introduced in gzip-1.3.6]
154   zgrep no longer malfunctions with a multi-digit context option like -15.
155   Now, it passes that option to grep (equivalent to -C15) just as it does
156   for single-digit options. [bug introduced in gzip-1.3.12]
158   zmore now acts more like 'more', and is more portable to POSIXish hosts.
161 * Noteworthy changes in release 1.5 (2012-06-17) [stable]
163 ** Bug fixes
165   gzip -d now decodes and checks header CRC16 checksums as specified by
166   the FHCRC section of Internet RFC 1952.
168   "gzip -d -S '' precious.gz" is now rejected immediately.  Before,
169   that command would emulate "rm -i precious.gz", but with an easily-
170   misunderstood prompt.  I.e., gzip would ask if it's ok to remove the
171   existing file, "precious.gz".  If you made the mistake of saying "yes",
172   it would remove that input file before attempting to uncompress it.
174   gzip -cdf now properly handles input consisting of gzip'd data followed
175   by uncompressed data.  Before it would output raw compressed input, too.
176   For example, now "(printf x|gzip; echo y)|gzip -dcf" prints "xy\n",
177   while before it would print "x<compressed data>y\n".
179   gzip -rf no longer compresses files more than once (e.g., replacing
180   FOO with FOO.gz.gz) on file systems such as ZFS where a readdir
181   loop that unlinks and creates files can revisit output files.
184 * Noteworthy changes in release 1.4 (2010-01-20) [stable]
186 ** Bug fixes
188   gzip -d could segfault and/or clobber the stack, possibly leading to
189   arbitrary code execution.  This affects x86_64 but not 32-bit systems.
190   This fixes CVE-2010-0001.
191   For more details, see https://bugzilla.redhat.com/554418
193   gzip -d would fail with a CRC error for some valid inputs.
194   So far, the only valid input known to exhibit this failure was
195   compressed "from FAT filesystem (MS-DOS, OS/2, NT)".  In addition,
196   to trigger the failure, your memcpy implementation must copy in
197   the "reverse" order.
200 * Noteworthy changes in release 1.3.14 (2009-10-30) [beta]
202 ** Bug fixes
204   gzip no longer fails when there is exactly one trailing NUL byte
205   gzip has always accepted trailing NUL bytes.  Note the plural.
207   zdiff would exit with status 2 (indicating an error) rather than 1 to
208   indicate differences when both inputs were compressed and different.
210   zdiff would fail to print differences in two compressed inputs
212   zgrep -f - didn't work
215 * Noteworthy changes in release 1.3.13 (2009-09-30) [stable]
217 ** 'gzip -f foo.gz' now creates a file foo.gz.gz instead of complaining.
219 ** Bug fixes
221   gzip -d no longer fails with "-" as 2nd or subsequent argument
223   gzip no longer ignores a close-induced write failure, e.g., on NFS
225   gzip -d no longer segfaults on certain invalid inputs
228 Major changes in Gzip 1.3.12 (2007-04-13)
230 * znew now uses $TMPDIR (default /tmp) instead of always using /tmp.
232 * It is now documented that gzip ignores case when examining file name
233   extensions; for example, 'gzip test.Gz' (without -f) fails because
234   the file name ends in '.Gz'.
236 Major changes in Gzip 1.3.11 (2007-02-05)
238 * As per the GNU coding standards, the behavior of gzip and its
239   companion executables no longer depend on the name used to invoke them.
240   For example, 'gzip' and 'gunzip' are no longer hard links;
241   instead, 'gunzip' is now a small program that invokes 'gzip -d'.
243 * zdiff now checks for subsidiary gzip failures, and works around
244   bugs in IRIX 6 sh, Tru64 4.0F ksh, and Solaris 8 bash.
246 Major changes in Gzip 1.3.10 (2006-12-30)
248 * gzip -c and zcat now work on special files, files with special mode bits,
249   and files with multiple hard links.
250 * gzip -q now exits with status 2 (not 1) when SIGPIPE is received.
251 * zcmp and zdiff did not work in the usual case, due to a typo.
252 * zgrep has many bugs fixed with argument handling, special characters,
253   and exit status.
254 * zless no longer mishandles $%=~ in file names.
256 Gzip 1.3.9 (2006-12-15)
258 * No major changes; only porting fixes.
260 Major changes in Gzip 1.3.8 (2006-12-08)
262 * Fix some gzip problems:
263   - A security fix from Debian 1.3.5-5 was inadvertently omitted.
264   - The assembler is now invoked with --noexecstack if supported,
265     so that gzip can better resist stack-smashing attacks.
267 Major changes in Gzip 1.3.7 (2006-12-06)
269 * Fix some gzip problems:
270   - Refuse to compress setuid or setgid files, or files with the sticky bit.
271   - Fix more race conditions in setting file permissions and owner,
272     removing output files, following symbolic links, and dealing with
273     special files.
274   - Remove most of the code working around ENAMETOOLONG deficiencies.
275     Systems with those deficiencies are long-dead, and the workarounds
276     had race conditions on modern hosts.
277   - Catch CPU time and file size limit signals, too.
278   - Check for read errors when closing files.
279   - Fix a core dump caused by a stray abort mistakenly introduced in 1.3.6.
280 * Fix some gzexe problems:
281   - Improve resistance to denial-of-service attacks.
282   - Fix some quoting and escaping bugs.
283   - Do not assume /tmp is sticky (though it should be!).
284   - Do not assume the working directory can be written.
285   - Rely on PATH in the generated executable, as the man page says.
286   - Don't assume IFS is sane.
287   - Exit with signal's status, if signaled.
289 Major changes in Gzip 1.3.6 (2006-11-20)
291 * Fix some race conditions in setting file timestamps, permissions, and owner.
292 * Fix some race conditions in signal handling.
293 * When gzip exits due to a signal, it exits with the signal's status, not 1.
294 * gzip now restores file timestamps to the resolution supported by the
295   time-setting primitives of the operating system, typically 1 microsecond.
296   Formerly it restored them only to the nearest second.
297 * gzip -r no longer attempts to reset the last-access times of directories
298   it reads, as this messes up when other processes are reading the directories.
299 * The options --version and --help now work on all gzip-installed executables,
300   and now use a format similar to other GNU programs.
301 * The manual is now distributed under the terms of the GNU Free
302   Documentation License without invariant sections or cover texts.
303 * Port to current versions of Autoconf, Automake, and Gnulib.
305 Major changes from 1.3.4 to 1.3.5
306 * gzip now removes any output symlink before writing output file.
307 * zgrep etc. scripts now port to POSIX 1003.1-2001 hosts.
308 * zforce no longer assumes 14-byte file name length limit.
309 * zless is now implemented using less and LESSOPEN, not zmore and PAGER.
310 * assembly-language speedups reenabled; were mistakenly disabled in 1.3.
312 Major changes from 1.3.3 to 1.3.4
313 * Less output is lost when decompressing a truncated file.
314 * The manual is now distributed under the terms of the GNU Free
315   Documentation License.
317 No major changes in 1.3.2 or 1.3.3 (bug fixes only)
319 Major changes from 1.3 to 1.3.1
320 * zgrep now supports --, -H, -h, -L, -l, -C, -d, -m and their long equivalents.
322 Major changes from 1.2.4 to 1.3
323 * Add support for large files, e.g. files larger than 2 GB on Solaris 2.6.
324 * Adjust file size listing format for files larger than 10 GB.
325 * New command `zless'.
326 * `zdiff' now reports exit status like `diff' does.
327 * `zcat' is now always called `zcat', not `gzcat'.
328   Similarly for `zdiff', `zgrep', `zmore', `znew', `zforce'.
329 * Warn about a compressed file's trailing zeros only if verbose,
330   for compatibility with recent versions of GNU tar.
331 * Conform to changes to GNU makefile standards.
332 * Port to Autoconf 2.13.
333 * Convert to Automake.
334 * Fix bugs in the following areas:
335   - files larger than 4 GB
336   - security hole involving symlinks from /tmp
337   - security hole involving long file names
338   - permissions bug when compressing a symbolic link to a file
339   - core dumps
340   - concatenated compressed files on INBUFSIZ boundaries
341   - porting bugs on hosts with signed chars
342   - porting bug with upper and lower case
343   - porting bug for hosts that reserve the names `basename' or `warning'
345 Major changes from 1.2.3 to 1.2.4
346 * By default, do not restore file name and timestamp from those saved
347   inside the .gz file (behave as 'compress'). Added the --name option
348   to force name and timestamp restoration.
349 * Accept - as synonym for stdin.
350 * Use manlinks=so or ln to support either hard links or .so in man pages
351 * Accept foo.gz~ in zdiff.
352 * Added support for Windows NT
353 * Handle ENAMETOOLONG for strict Posix systems
354 * Use --recursive instead of --recurse to comply with Webster and
355   the GNU stdandard.
356 * Allow installation of shell scripts with a g prefix: make G=g install
357 * Install by default zcat as gzcat if gzcat already exists in path.
358 * Let zmore behave as more when invoked without parameters (give help)
359 * Let gzip --list reject files not in gzip format even with --force.
360 * Don't complain about non gzip files for options -rt or -rl.
361 * Added advice in INSTALL for several systems.
363 Major changes from 1.2.2 to 1.2.3
364 * Don't display the output name when decompressing except with --verbose.
365 * Remove usage of alloca in getopt.c and all makefiles.
366 * Added the zfile shell script in subdirectory sample.
367 * Moved the list of compiler bugs from README to INSTALL.
368 * Added vms/Readme.vms.
370 Major changes from 1.2.1 to 1.2.2
371 * Fix a compilation error on Sun with cc (worked with gcc).
373 Major changes from 1.2 to 1.2.1
374 * Let zmore act as more if the data is not gzipped.
375 * made gzexe more secure (don't rely on PATH).
376 * By default, display output name only when the name was actually truncated.
378 Major changes from 1.1.2 to 1.2
379 * Added the --list option to display the file characteristics.
380 * Added the --no-name option: do not save or restore original filename
381   Save the original name by default.
382 * Allow gunzip --suffix "" to attempt decompression on any file
383   regardless of its extension if an original name is present.
384 * Add support for the SCO compress -H format.
385 * gzip --fast now compresses faster (speed close to that of compress)
386   with degraded compression ratio (but still better than compress).
387   Default level changed to -6 (acts exactly as previous level -5) to
388   be a better indication of its placement in the speed/ratio range.
389 * Use smart name truncation: 123456789012.c -> 123456789.c.gz
390    instead of 12345678901.gz
391 * With --force, let zcat pass non gzip'ed data unchanged (zcat == cat)
392 * Added the zgrep shell script.
393 * Made sub.c useful for 16 bit sound, 24 bit images, etc..
394 * Suppress warnings about suffix for gunzip -r, except with --verbose.
395 * On MSDOS, use .gz extension when possible (files without extension)
396 * Moved the sample programs to a subdirectory sample.
397 * Added a "Special targets" section in INSTALL.
399 Major changes from 1.1.1 to 1.1.2.
400 * Fix serious bug for VMS (-gz not removed when decompressing).
401 * Allow suffix other than .gz in znew.
402 * Do not display compression ratio when decompressing stdin.
403 * In zmore.in, work around brain damaged stty -g (Ultrix).
404 * Display a correct compression ratio for .Z files.
405 * Added .z to .gz renaming script in INTALL.
406 * Allow setting CFLAGS in configure.
408 Major changes from 1.1 to 1.1.1.
409 * Fix serious bug in vms.c (affects Vax/VMS only).
410 * Added --ascii option.
411 * Add workaround in configure.in for Ultrix (quote eval argument)
413 Major changes from 1.0.7 to 1.1.
414 * Use .gz suffix by default, add --suffix option.
415 * Let gunzip accept a "_z" suffix (used by one 'compress' on Vax/VMS).
416 * Quit when reading garbage from stdin instead of reporting an error.
417 * Added makefile for VAX/MMS and support for wildcards on VMS.
418 * Added support for MSC under OS/2.
419 * Added support for Prime/PRIMOS.
420 * Display compression ratio also when decompressing (with --verbose).
421 * Quit after --version (GNU standard)
422 * Use --force to bypass isatty() check
423 * Continue processing other files in case of recoverable error.
424 * Added comparison of zip and gzip in the readme file.
425 * Added small sample programs (ztouch, sub, add)
426 * Use less memory when compiled with -DSMALL_MEM (for MSDOS).
427 * Remove the "off by more than one minute" timestamp kludge
429 Major changes from 1.0.6 to 1.0.7.
430 * Allow zmore to read from standard input (like more).
431 * Support the 68000 (Atari ST) in match.S.
432 * Retry partial writes (required on Linux when gzip is suspended in a pipe).
433 * Allow full pathnames and renamings in gzexe.
434 * Don't let gzexe compress setuid executables or gzip itself.
435 * Added vms/Makefile.gcc for gcc on the Vax.
436 * Allow installation of binaries and shell scripts in different dirs.
437 * Allows complex PAGER variable in zmore (e.g.: PAGER="col -x | more")
438 * Allow installation of zcat as gzcat.
439 * Several small changes for portability to old or weird systems.
440 * Suppress help message and send compressed data to the terminal when
441   gzip is invoked without parameters and without redirection.
442 *  Add compile option GNU_STANDARD to respect the GNU coding standards:
443    with -DGNU_STANDARD, behave as gzip even if invoked under the name gunzip.
444 (I don't like the last two changes, which were requested by the FSF.)
446 Major changes from 1.0.5 to 1.0.6.
447 * Let gzexe detect executables that are already gzexe'd.
448 * Keep file attributes in znew and gzexe if cpmod is available.
449 * Don't try restoring record format on VMS (1.0.5 did not work correctly)
450 * Added asm version for 68000 in amiga/match.a.
451   Use asm version for Atari TT and NeXT.
452 * For OS/2, assume HPFS by default, add flag OS2FAT if necessary.
453 * Fixed some bugs in zdiff and define zcmp as a link to zdiff.
456 Major changes from 1.0.4 to 1.0.5.
457 * For VMS, restore the file type for variable record format, otherwise
458     extract in fixed length format (not perfect, but better than
459     forcing all files to be in stream_LF format).
460 * For VMS, use "-z" default suffix and accept a version number in file names.
461 * For Unix, allow compression of files with name ending in 'z'. Use only
462   .z, .*-z, .tgz, .taz as valid gzip extensions. In the last two cases,
463   extract to .tar by default.
464 * On some versions of MSDOS, files with a 3 character extension could not
465   be compressed.
466 * Garbage collect files in /tmp created by gzexe.
467 * Fix the 'OS code' byte in the gzip header.
468 * For the Amiga, add the missing utime.h and add support for gcc.
471 Major changes from 1.0.3 to 1.0.4.
472 * Added optimized asm version for 68020.
473 * Add support for DJGPP.
475 * Add support for the Atari ST.
476 * Added zforce to rename gzip'ed files with truncated names.
477 * Do not install with name uncompress (some systems rely on the
478   absence of any check in the old uncompress).
479 * Added missing function (fcfree) in msdos/tailor.c
480 * Let gunzip handle .tgz files, and let gzip skip them.
481 * Added -d option (decompress) for gzexe and try preserving file permissions.
482 * Suppress all warnings with -q.
483 * Use GZIP_OPT for VMS to avoid conflict with program name.
484 * ... and many other small changes (see ChangeLog)
487 Major changes from 1.0.2 to 1.0.3
488 * Added -K option for znew to keep old .Z files if smaller
489 * Added -q option (quiet) to cancel -v in GZIP env variable.
490 * Made gzexe safer on systems with filename limitation to 14 chars.
491 * Fixed bugs in handling of GZIP env variable and incorrect free with Turbo C.
494 Major changes from 1.0.1 to 1.0.2
495 * Added env variable GZIP for default options. Example:
496    for sh:   GZIP="-8 -v"; export GZIP
497    for csh:  setenv GZIP "-8 -v"
498 * Added support for the Amiga.
499 * znew now keeps the old .Z if it is smaller than the .z file.
500   This can happen for some large and very redundant files.
501 * Do not complain about trailing garbage for record oriented IO (Vax/VMS).
502   This implies however that multi-part gzip files are not supported
503   on such systems.
504 * Added gzexe to compress rarely used executables.
505 * Reduce memory usage (required for MSDOS and useful on all systems).
506 * Preserve timestamp in znew -P (pipe option) if touch -r works.
509 Major changes from 1.0 to 1.0.1
510 * fix trivial errors in the Borland makefile (msdos/Makefile.bor)
513 Major changes from 0.8.2 to 1.0
514 * gzip now runs on Vax/VMS
515 * gzip will not not overwrite files without -f when using /bin/sh in
516   background.
517 * Support the test option -t for compressed (.Z) files.
518   Allow some data recovery for bad .Z files.
519 * Added makefiles for MSDOS (Only tested for MSC, not Borland).
520 * still more changes to configure for several systems
523 Major changes from 0.8.1 to 0.8.2:
524 * yet more changes to configure for Linux and other systems
525 * Allow zcat on a file with multiple links.
528 Major changes from 0.8 to 0.8.1:
529 * znew has now a pipe option -P to reduce the disk space requirements,
530   but this option does not preserve timestamps.
531 * Fixed some #if directives for compilation with TurboC.
534 Major changes from 0.7 to 0.8:
535 * gzip can now extract .z files created by 'pack'.
536 * configure should no longer believe that every machine is a 386
537 * Fix the entry for /etc/magic in INSTALL.
538 * Add patch for GNU tar 1.11.1 and a pointer to crypt++.el
539 * Uncompress files with multiple links only with -f.
540 * Fix for uncompress of .Z files on 16-bit machines
541 * Create a correct output name for file names of exactly N-1 chars when
542   the system has a limit of N chars.
545 Major changes from 0.6 to 0.7:
546 * Use "make check" instead of "make test".
547 * Keep timestamp and pass options to gzip in znew.
548 * Do not create .z.z files with gzip -r.
549 * Allow again gunzip .zip files (was working in 0.5)
550 * Allow again compilation with TurboC 2.0 (was working in 0.4)
553 Major changes form 0.5 to 0.6:
554 * gunzip reported an error when extracting certain .z files. The .z files
555   produced by gzip 0.5 are correct and can be read by gunzip 0.6.
556 * gunzip now supports multiple compressed members within a single .z file.
557 * Fix the check for i386 in configure.
558 * Added "make test" to check for compiler bugs. (gcc -finline-functions
559   is broken at least on the NeXT.)
560 * Use environment variable PAGER in zmore if it is defined.
561 * Accept gzcat in addition to zcat for people having /usr/bin before
562   /usr/local/bin in their path.
565 ========================================================================
567 Copyright (C) 1999, 2001-2002, 2006-2007, 2009-2022 Free Software Foundation,
568 Inc.
569 Copyright (C) 1992, 1993 Jean-loup Gailly
571 Permission is granted to copy, distribute and/or modify this document
572 under the terms of the GNU Free Documentation License, Version 1.3 or
573 any later version published by the Free Software Foundation; with no
574 Invariant Sections, with no Front-Cover Texts, and with no Back-Cover
575 Texts.  A copy of the license is included in the ``GNU Free
576 Documentation License'' file as part of this distribution.