Call flush_write_file() in _exit_cleanup() if we are keeping a
[rsync/rsync.git] / NEWS
1 NEWS for rsync 2.6.3 (30 Sep 2004)
2 Protocol: 28 (unchanged)
3 Changes since 2.6.2:
4
5   SECURITY FIXES:
6
7     - A bug in the sanitize_path routine (which affects a non-chrooted
8       rsync daemon) could allow a user to craft a pathname that would get
9       transformed into an absolute path for certain options (but not for
10       file-transfer names).  If you're running an rsync daemon with chroot
11       disabled, *please upgrade*, ESPECIALLY if the user privs you run
12       rsync under is anything above "nobody".
13
14   OUTPUT CHANGES (ATTN: those using a script to parse the verbose output):
15
16     - Please note that the 2-line footer (output when verbose) now uses the
17       term "sent" instead of "wrote" and "received" instead of "read".  If
18       you are not parsing the numeric values out of this footer, a script
19       would be better off using the empty line prior to the footer as the
20       indicator that the verbose output is over.
21       
22     - The output from the --stats option was similarly affected to change
23       "written" to "sent" and "read" to "received".
24
25     - Rsync ensures that a filename that contains a newline gets mentioned
26       with each newline transformed into a question mark (which prevents a
27       filename from causing an empty line to be output).
28
29     - The "backed up ..." message that is output when at least 2 --verbose
30       options are specified is now the same both with and without the
31       --backup-dir option.
32
33   BUG FIXES:
34
35     - Fixed a crash bug that might appear when --delete was used and
36       multiple source directories were specified.
37
38     - Fixed a 32-bit truncation of the file length when generating the
39       checksums.
40
41     - The --backup code no longer attempts to create some directories
42       over and over again (generating warnings along the way).
43
44     - Fixed a bug in the reading of the secrets file (by the daemon) and
45       the password file (by the client):  the files no longer need to be
46       terminated by a newline for their content to be read in.
47
48     - If a file has a read error on the sending side or the reconstructed
49       data doesn't match the expected checksum (perhaps due to the basis
50       file changing during the transfer), the receiver will no longer
51       retain the resulting file unless the --partial option was specified.
52       (Note: for the read-error detection to work, neither side can be
53       older than 2.6.3 -- older receivers will always retain the file, and
54       older senders don't tell the receiver that the file had a read
55       error.)
56
57     - If a file gets resent in a single transfer and the --backup option
58       is enabled, rsync no longer performs a duplicate backup (it used to
59       overwrite the original file in the backup area).
60
61     - Files specified in the daemon's "exclude" or "exclude from" config
62       items are now excluded from being uploaded (assuming that the module
63       allows uploading at all) in addition to the old download exclusion.
64
65     - Got rid of a potential hang in the receiver when near the end of a
66       phase.
67
68     - When using --backup without a --backup-dir, rsync no longer preserves
69       the modify time on directories.  This avoids confusing NFS.
70
71     - When --copy-links (-L) is specified, we now output a separate error
72       for a symlink that has no referent instead of claiming that a file
73       "vanished".
74
75     - The --copy-links (-L) option no longer has the side-effect of telling
76       the receiving side to follow symlinks.  See the --keep-dirlinks
77       option (mentioned below) for a way to specify that behavior.
78
79     - Error messages from the daemon server's option-parsing (such as
80       refused options) are now successfully transferred back to the client
81       (the server used to fail to send the message because the socket
82       wasn't in the right state for the message to get through).
83
84     - Most transfer errors that occur during a daemon transfer are now
85       returned to the user in addition to being logged (some messages are
86       intended to be daemon-only and are not affected by this).
87
88     - Fixed a bug in the daemon authentication code when using one of the
89       batch-processing options.
90
91     - We try to work around some buggy IPv6 implementations that fail to
92       implement IPV6_V6ONLY.  This should fix the "address in use" error
93       that some daemons get when running on an OS with a buggy IPv6
94       implementation.  Also, if the new code gets this error, we might
95       suggest that the user specify --ipv4 or --ipv6 (if we think it will
96       help).
97
98     - When the remote rsync dies, make a better effort to recover any error
99       messages it may have sent before dying (the local rsync used to just
100       die with a socket-write error).
101
102     - When using --delete and a --backup-dir that contains files that are
103       hard-linked to their destination equivalents, rsync now makes sure
104       that removed files really get removed (avoids a really weird rename()
105       behavior).
106
107     - Avoid a bogus run-time complaint about a lack of 64-bit integers when
108       the int64 type is defined as an off_t and it actually has 64-bits.
109
110     - Added a configure check for open64() without mkstemp64() so that we
111       can avoid using mkstemp() when such a combination is encountered.
112       This bypasses a problem writing out large temp files on OSes such as
113       AIX and HP-UX.
114
115     - Fixed an age-old crash problem with --read-batch on a local copy
116       (rsync was improperly assuming --whole-file for the local copy).
117
118     - When --dry-run (-n) is used and the destination directory does not
119       exist, rsync now produces a correct report of files that would be
120       sent instead of dying with a chdir() error.
121
122     - Fixed a bug that could cause a slow-to-connect rsync daemon to die
123       with an error instead of waiting for the connection to finish.
124
125     - Fixed an ssh interaction that could cause output to be lost when the
126       user chose to combine the output of rsync's stdout and stderr (e.g.
127       using the "2>&1").
128
129   ENHANCEMENTS:
130
131     - Added the --partial-dir=DIR option that lets you specify where to
132       (temporarily) put a partially transferred file (instead of over-
133       writing the destination file).  E.g.  --partial-dir=.rsync-partial
134       Also added support for the RSYNC_PARTIAL_DIR environment variable
135       that, when found, transforms a regular --partial option (such as
136       the convenient -P option) into one that also specifies a directory.
137
138     - Added --keep-dirlinks (-K), which allows you to symlink a directory
139       onto another partition on the receiving side and have rsync treat it
140       as matching a normal directory from the sender.
141
142     - Added the --inplace option that tells rsync to write each destination
143       file without using a temporary file.  The matching of existing data
144       in the destination file can be severely limited by this, but there
145       are also cases where this is more efficient (such as appending data).
146       Use only when needed (see the man page for more details).
147
148     - Added the "write only" option for the daemon's config file.
149
150     - Added long-option names for -4 and -6 (namely --ipv4 and --ipv6)
151       and documented all these options in the man page.
152
153     - Improved the handling of the --bwlimit option so that it's less
154       bursty, more accurate, and works properly over a larger range of
155       values.
156
157     - The rsync daemon-over-ssh code now looks for SSH_CONNECTION and
158       SSH2_CLIENT in addition to SSH_CLIENT to figure out the IP address.
159
160     - Added the --checksum-seed=N option for advanced users.
161
162     - Batch writing/reading has a brand-new implementation that is simpler,
163       fixes a few weird problems with the old code (such as no longer
164       sprinkling the batch files into different dirs or even onto different
165       systems), and is much less intrusive into the code (making it easier
166       to maintain for the future).  The new code generates just one data
167       file instead of three, which makes it possible to read the batch on
168       stdin via a remote shell.  Also, the old requirement of forcing the
169       same fixed checksum-seed for all batch processing has been removed.
170
171     - If an rsync daemon has a module set with "list = no" (which hides its
172       presence in the list of available modules), a user that fails to
173       authenticate gets the same "unknown module" error that they would get
174       if the module were actually unknown (while still logging the real
175       error to the daemon's log file).  This prevents fishing for module
176       names.
177
178     - The daemon's "refuse options" config item now allows you to match
179       option names using wildcards and/or the single-letter option names.
180
181     - Each transferred file now gets its permissions and modified-time
182       updated before the temp-file gets moved into place.  Previously, the
183       finished file would have a very brief window where its permissions
184       disallowed all group and world access.
185
186     - Added the ability to parse a literal IPv6 address in an "rsync:" URL
187       (e.g. rsync://[2001:638:500:101::21]:873/module/dir).
188
189     - The daemon's wildcard expanding code can now handle more than 1000
190       filenames (it's now limited by memory instead of having a hard-wired
191       limit).
192
193   INTERNAL:
194
195     - Some cleanup in the exclude code has saved some per-exclude memory
196       and made the code easier to maintain.
197
198     - Improved the argv-overflow checking for a remote command that has a
199       lot of args.
200
201     - Use rsyserr() in the various places that were still calling rprintf()
202       with strerror() as an arg.
203
204     - If an rsync daemon is listening on multiple sockets (to handle both
205       IPv4 and IPv6 to a single port), we now close all the unneeded file
206       handles after we accept a connection (we used to close just one of
207       them).
208
209     - Optimized the handling of larger block sizes (rsync used to slow to a
210       crawl if the block size got too large).
211
212     - Optimized away a loop in hash_search().
213
214     - Some improvements to the sanitize_path() and clean_fname() functions
215       makes them more efficient and produce better results (while still
216       being compatible with the file-name cleaning that gets done on both
217       sides when sending the file-list).
218
219     - Got rid of alloc_sanitize_path() after adding a destination-buffer
220       arg to sanitize_path() made it possible to put all the former's
221       functionality into the latter.
222
223     - The file-list that is output when at least 4 verbose options are
224       specified reports the uid value on the sender even when rsync is
225       not running as root (since we might be sending to a root receiver).
226
227   BUILD CHANGES:
228
229     - Added a "gen" target to rebuild most of the generated files,
230       including configure, config.h.in, the man pages, and proto.h.
231
232     - If "make proto" doesn't find some changes in the prototypes, the
233       proto.h file is left untouched (its time-stamp used to always be
234       updated).
235
236     - The variable $STRIP (that is optionally set by the install-strip
237       target's rule) was changed to $INSTALL_STRIP because some systems
238       have $STRIP already set in the environment.
239
240     - Fixed a build problem when SUPPORT_HARD_LINKS isn't defined.
241
242     - When cross-compiling, the gettimeofday() function is now assumed to
243       be a modern version that takes two-args (since we can't test it).
244
245   DEVELOPER RELATED:
246
247     - The scripts in the testsuite dir were cleaned up a bit and a few
248       new tests added.
249
250     - Some new diffs were added to the patches dir, and some accepted
251       ones were removed.
252