Improved --verbose, --itemize-changes, and --log-format.
[rsync/rsync.git] / rsync.yo
1 mailto(rsync-bugs@samba.org)
2 manpage(rsync)(1)(30 Sep 2004)()()
3 manpagename(rsync)(faster, flexible replacement for rcp)
4 manpagesynopsis()
5
6 rsync [OPTION]... SRC [SRC]... [USER@]HOST:DEST
7
8 rsync [OPTION]... [USER@]HOST:SRC DEST
9
10 rsync [OPTION]... SRC [SRC]... DEST
11
12 rsync [OPTION]... [USER@]HOST::SRC [DEST]
13
14 rsync [OPTION]... SRC [SRC]... [USER@]HOST::DEST
15
16 rsync [OPTION]... rsync://[USER@]HOST[:PORT]/SRC [DEST]
17
18 rsync [OPTION]... SRC [SRC]... rsync://[USER@]HOST[:PORT]/DEST
19
20 manpagedescription()
21
22 rsync is a program that behaves in much the same way that rcp does,
23 but has many more options and uses the rsync remote-update protocol to
24 greatly speed up file transfers when the destination file is being
25 updated.
26
27 The rsync remote-update protocol allows rsync to transfer just the
28 differences between two sets of files across the network connection, using
29 an efficient checksum-search algorithm described in the technical
30 report that accompanies this package.
31
32 Some of the additional features of rsync are:
33
34 itemize(
35   it() support for copying links, devices, owners, groups, and permissions
36   it() exclude and exclude-from options similar to GNU tar
37   it() a CVS exclude mode for ignoring the same files that CVS would ignore
38   it() can use any transparent remote shell, including ssh or rsh
39   it() does not require root privileges
40   it() pipelining of file transfers to minimize latency costs
41   it() support for anonymous or authenticated rsync servers (ideal for
42        mirroring)
43 )
44
45 manpagesection(GENERAL)
46
47 There are eight different ways of using rsync. They are:
48
49 itemize(
50         it() for copying local files. This is invoked when neither
51              source nor destination path contains a : separator
52         it() for copying from the local machine to a remote machine using
53         a remote shell program as the transport (such as ssh or
54         rsh). This is invoked when the destination path contains a
55         single : separator.
56         it() for copying from a remote machine to the local machine
57         using a remote shell program. This is invoked when the source
58         contains a : separator.
59         it() for copying from a remote rsync server to the local
60         machine. This is invoked when the source path contains a ::
61         separator or an rsync:// URL.
62         it() for copying from the local machine to a remote rsync
63         server. This is invoked when the destination path contains a ::
64         separator or an rsync:// URL.
65         it() for copying from a remote machine using a remote shell
66         program as the transport, using rsync server on the remote
67         machine.  This is invoked when the source path contains a ::
68         separator and the bf(--rsh=COMMAND) (aka "bf(-e COMMAND)") option is
69         also provided.
70         it() for copying from the local machine to a remote machine
71         using a remote shell program as the transport, using rsync
72         server on the remote machine.  This is invoked when the
73         destination path contains a :: separator and the
74         bf(--rsh=COMMAND) option is also provided.
75         it() for listing files on a remote machine. This is done the
76         same way as rsync transfers except that you leave off the
77         local destination.
78 )
79
80 Note that in all cases (other than listing) at least one of the source
81 and destination paths must be local.
82
83 manpagesection(SETUP)
84
85 See the file README for installation instructions.
86
87 Once installed, you can use rsync to any machine that you can access via
88 a remote shell (as well as some that you can access using the rsync
89 daemon-mode protocol).  For remote transfers, a modern rsync uses ssh
90 for its communications, but it may have been configured to use a
91 different remote shell by default, such as rsh or remsh.
92
93 You can also specify any remote shell you like, either by using the bf(-e)
94 command line option, or by setting the RSYNC_RSH environment variable.
95
96 One common substitute is to use ssh, which offers a high degree of
97 security.
98
99 Note that rsync must be installed on both the source and destination
100 machines.
101
102 manpagesection(USAGE)
103
104 You use rsync in the same way you use rcp. You must specify a source
105 and a destination, one of which may be remote.
106
107 Perhaps the best way to explain the syntax is with some examples:
108
109 quote(tt(rsync -t *.c foo:src/))
110
111 This would transfer all files matching the pattern *.c from the
112 current directory to the directory src on the machine foo. If any of
113 the files already exist on the remote system then the rsync
114 remote-update protocol is used to update the file by sending only the
115 differences. See the tech report for details.
116
117 quote(tt(rsync -avz foo:src/bar /data/tmp))
118
119 This would recursively transfer all files from the directory src/bar on the
120 machine foo into the /data/tmp/bar directory on the local machine. The
121 files are transferred in "archive" mode, which ensures that symbolic
122 links, devices, attributes, permissions, ownerships, etc. are preserved
123 in the transfer.  Additionally, compression will be used to reduce the
124 size of data portions of the transfer.
125
126 quote(tt(rsync -avz foo:src/bar/ /data/tmp))
127
128 A trailing slash on the source changes this behavior to avoid creating an
129 additional directory level at the destination.  You can think of a trailing
130 / on a source as meaning "copy the contents of this directory" as opposed
131 to "copy the directory by name", but in both cases the attributes of the
132 containing directory are transferred to the containing directory on the
133 destination.  In other words, each of the following commands copies the
134 files in the same way, including their setting of the attributes of
135 /dest/foo:
136
137 quote(
138 tt(rsync -av /src/foo /dest)nl()
139 tt(rsync -av /src/foo/ /dest/foo)nl()
140 )
141
142 You can also use rsync in local-only mode, where both the source and
143 destination don't have a ':' in the name. In this case it behaves like
144 an improved copy command.
145
146 quote(tt(rsync somehost.mydomain.com::))
147
148 This would list all the anonymous rsync modules available on the host
149 somehost.mydomain.com.  (See the following section for more details.)
150
151 manpagesection(ADVANCED USAGE)
152
153 The syntax for requesting multiple files from a remote host involves using
154 quoted spaces in the SRC.  Some examples:
155
156 quote(tt(rsync host::'modname/dir1/file1 modname/dir2/file2' /dest))
157
158 This would copy file1 and file2 into /dest from an rsync daemon.  Each
159 additional arg must include the same "modname/" prefix as the first one,
160 and must be preceded by a single space.  All other spaces are assumed
161 to be a part of the filenames.
162
163 quote(tt(rsync -av host:'dir1/file1 dir2/file2' /dest))
164
165 This would copy file1 and file2 into /dest using a remote shell.  This
166 word-splitting is done by the remote shell, so if it doesn't work it means
167 that the remote shell isn't configured to split its args based on
168 whitespace (a very rare setting, but not unknown).  If you need to transfer
169 a filename that contains whitespace, you'll need to either escape the
170 whitespace in a way that the remote shell will understand, or use wildcards
171 in place of the spaces.  Two examples of this are:
172
173 quote(
174 tt(rsync -av host:'file\ name\ with\ spaces' /dest)nl()
175 tt(rsync -av host:file?name?with?spaces /dest)nl()
176 )
177
178 This latter example assumes that your shell passes through unmatched
179 wildcards.  If it complains about "no match", put the name in quotes.
180
181 manpagesection(CONNECTING TO AN RSYNC SERVER)
182
183 It is also possible to use rsync without a remote shell as the
184 transport. In this case you will connect to a remote rsync server
185 running on TCP port 873.
186
187 You may establish the connection via a web proxy by setting the
188 environment variable RSYNC_PROXY to a hostname:port pair pointing to
189 your web proxy.  Note that your web proxy's configuration must support
190 proxy connections to port 873.
191
192 Using rsync in this way is the same as using it with a remote shell except
193 that:
194
195 itemize(
196         it() you use a double colon :: instead of a single colon to
197         separate the hostname from the path or an rsync:// URL.
198         it() the remote server may print a message of the day when you
199         connect.
200         it() if you specify no path name on the remote server then the
201         list of accessible paths on the server will be shown.
202         it() if you specify no local destination then a listing of the
203         specified files on the remote server is provided.
204 )
205
206 Some paths on the remote server may require authentication. If so then
207 you will receive a password prompt when you connect. You can avoid the
208 password prompt by setting the environment variable RSYNC_PASSWORD to
209 the password you want to use or using the bf(--password-file) option. This
210 may be useful when scripting rsync.
211
212 WARNING: On some systems environment variables are visible to all
213 users. On those systems using bf(--password-file) is recommended.
214
215 manpagesection(CONNECTING TO AN RSYNC SERVER OVER A REMOTE SHELL PROGRAM)
216
217 It is sometimes useful to be able to set up file transfers using rsync
218 server capabilities on the remote machine, while still using ssh or
219 rsh for transport.  This is especially useful when you want to connect
220 to a remote machine via ssh (for encryption or to get through a
221 firewall), but you still want to have access to the rsync server
222 features (see RUNNING AN RSYNC SERVER OVER A REMOTE SHELL PROGRAM,
223 below).
224
225 From the user's perspective, using rsync in this way is the same as
226 using it to connect to an rsync server, except that you must
227 explicitly set the remote shell program on the command line with
228 bf(--rsh=COMMAND).  (Setting RSYNC_RSH in the environment will not turn on
229 this functionality.)
230
231 In order to distinguish between the remote-shell user and the rsync
232 server user, you can use '-l user' on your remote-shell command:
233
234 verb(    rsync -av --rsh="ssh -l ssh-user" \ 
235         rsync-user@host::module[/path] local-path)
236
237 The "ssh-user" will be used at the ssh level; the "rsync-user" will be
238 used to check against the rsyncd.conf on the remote host.
239
240 manpagesection(RUNNING AN RSYNC SERVER)
241
242 An rsync server is configured using a configuration file.  Please see the
243 rsyncd.conf(5) man page for more information.  By default the configuration
244 file is called /etc/rsyncd.conf, unless rsync is running over a remote
245 shell program and is not running as root; in that case, the default name
246 is rsyncd.conf in the current directory on the remote computer
247 (typically $HOME).
248
249 manpagesection(RUNNING AN RSYNC SERVER OVER A REMOTE SHELL PROGRAM)
250
251 See the rsyncd.conf(5) man page for full information on the rsync
252 server configuration file.
253
254 Several configuration options will not be available unless the remote
255 user is root (e.g. chroot, setuid/setgid, etc.).  There is no need to
256 configure inetd or the services map to include the rsync server port
257 if you run an rsync server only via a remote shell program.
258
259 To run an rsync server out of a single-use ssh key, see this section
260 in the rsyncd.conf(5) man page.
261
262 manpagesection(EXAMPLES)
263
264 Here are some examples of how I use rsync.
265
266 To backup my wife's home directory, which consists of large MS Word
267 files and mail folders, I use a cron job that runs
268
269 quote(tt(rsync -Cavz . arvidsjaur:backup))
270
271 each night over a PPP connection to a duplicate directory on my machine
272 "arvidsjaur".
273
274 To synchronize my samba source trees I use the following Makefile
275 targets:
276
277 verb(    get:
278             rsync -avuzb --exclude '*~' samba:samba/ .
279     put:
280             rsync -Cavuzb . samba:samba/
281     sync: get put)
282
283 this allows me to sync with a CVS directory at the other end of the
284 connection. I then do CVS operations on the remote machine, which saves a
285 lot of time as the remote CVS protocol isn't very efficient.
286
287 I mirror a directory between my "old" and "new" ftp sites with the
288 command:
289
290 tt(rsync -az -e ssh --delete ~ftp/pub/samba nimbus:"~ftp/pub/tridge")
291
292 This is launched from cron every few hours.
293
294 manpagesection(OPTIONS SUMMARY)
295
296 Here is a short summary of the options available in rsync. Please refer
297 to the detailed description below for a complete description.  verb(
298  -v, --verbose               increase verbosity
299  -q, --quiet                 suppress non-error messages
300  -c, --checksum              always checksum
301  -c, --checksum              skip based on checksum, not mod-time & size
302  -a, --archive               archive mode; same as -rlptgoD (no -H)
303  -r, --recursive             recurse into directories
304  -R, --relative              use relative path names
305      --no-relative           turn off --relative
306      --no-implied-dirs       don't send implied dirs with -R
307  -b, --backup                make backups (see --suffix & --backup-dir)
308      --backup-dir=DIR        make backups into hierarchy based in DIR
309      --suffix=SUFFIX         backup suffix (default ~ w/o --backup-dir)
310  -u, --update                skip files that are newer on the receiver
311      --inplace               update destination files in-place
312  -d, --dirs                  transfer directories without recursing
313  -l, --links                 copy symlinks as symlinks
314  -L, --copy-links            transform symlink into referent file/dir
315      --copy-unsafe-links     only "unsafe" symlinks are transformed
316      --safe-links            ignore symlinks that point outside the tree
317  -H, --hard-links            preserve hard links
318  -K, --keep-dirlinks         treat symlinked dir on receiver as dir
319  -p, --perms                 preserve permissions
320  -o, --owner                 preserve owner (root only)
321  -g, --group                 preserve group
322  -D, --devices               preserve devices (root only)
323  -t, --times                 preserve times
324  -O, --omit-dir-times        omit directories when preserving times
325  -S, --sparse                handle sparse files efficiently
326  -n, --dry-run               show what would have been transferred
327  -W, --whole-file            copy files whole (without rsync algorithm)
328      --no-whole-file         always use incremental rsync algorithm
329  -x, --one-file-system       don't cross filesystem boundaries
330  -B, --block-size=SIZE       force a fixed checksum block-size
331  -e, --rsh=COMMAND           specify the remote shell to use
332      --rsync-path=PATH       specify path to rsync on the remote machine
333      --existing              only update files that already exist
334      --ignore-existing       ignore files that already exist on receiver
335      --del                   an alias for --delete-during
336      --delete                delete files that don't exist on sender
337      --delete-before         receiver deletes before transfer (default)
338      --delete-during         receiver deletes during xfer, not before
339      --delete-after          receiver deletes after transfer, not before
340      --delete-excluded       also delete excluded files on receiver
341      --ignore-errors         delete even if there are I/O errors
342      --force                 force deletion of dirs even if not empty
343      --max-delete=NUM        don't delete more than NUM files
344      --max-size=SIZE         don't transfer any file larger than SIZE
345      --partial               keep partially transferred files
346      --partial-dir=DIR       put a partially transferred file into DIR
347      --delay-updates         put all updated files into place at end
348      --numeric-ids           don't map uid/gid values by user/group name
349      --timeout=TIME          set I/O timeout in seconds
350  -I, --ignore-times          don't skip files that match size and time
351      --size-only             skip files that match in size
352      --modify-window=NUM     compare mod-times with reduced accuracy
353  -T, --temp-dir=DIR          create temporary files in directory DIR
354  -y, --fuzzy                 find similar file for basis if no dest file
355      --compare-dest=DIR      also compare received files relative to DIR
356      --copy-dest=DIR         ... and include copies of unchanged files
357      --link-dest=DIR         hardlink to files in DIR when unchanged
358  -z, --compress              compress file data during the transfer
359  -C, --cvs-exclude           auto-ignore files in the same way CVS does
360  -f, --filter=RULE           add a file-filtering RULE
361  -F                          same as --filter='dir-merge /.rsync-filter'
362                              repeated: --filter='- .rsync-filter'
363      --exclude=PATTERN       exclude files matching PATTERN
364      --exclude-from=FILE     read exclude patterns from FILE
365      --include=PATTERN       don't exclude files matching PATTERN
366      --include-from=FILE     read include patterns from FILE
367      --files-from=FILE       read list of source-file names from FILE
368  -0, --from0                 all *from file lists are delimited by nulls
369      --version               print version number
370      --port=PORT             specify double-colon alternate port number
371      --blocking-io           use blocking I/O for the remote shell
372      --no-blocking-io        turn off blocking I/O when it is default
373      --stats                 give some file-transfer stats
374      --progress              show progress during transfer
375  -P                          same as --partial --progress
376  -i, --itemize-changes       output a change-summary for all updates
377      --log-format=FORMAT     log file-transfers using specified format
378      --password-file=FILE    read password from FILE
379      --list-only             list the files instead of copying them
380      --bwlimit=KBPS          limit I/O bandwidth; KBytes per second
381      --write-batch=FILE      write a batched update to FILE
382      --read-batch=FILE       read a batched update from FILE
383      --checksum-seed=NUM     set block/file checksum seed (advanced)
384  -4, --ipv4                  prefer IPv4
385  -6, --ipv6                  prefer IPv6
386  -h, --help                  show this help screen)
387
388 Rsync can also be run as a daemon, in which case the following options are
389 accepted: verb(
390      --daemon                run as an rsync daemon
391      --address=ADDRESS       bind to the specified address
392      --bwlimit=KBPS          limit I/O bandwidth; KBytes per second
393      --config=FILE           specify alternate rsyncd.conf file
394      --no-detach             do not detach from the parent
395      --port=PORT             listen on alternate port number
396  -v, --verbose               increase verbosity
397  -4, --ipv4                  prefer IPv4
398  -6, --ipv6                  prefer IPv6
399  -h, --help                  show this help screen)
400
401 manpageoptions()
402
403 rsync uses the GNU long options package. Many of the command line
404 options have two variants, one short and one long.  These are shown
405 below, separated by commas. Some options only have a long variant.
406 The '=' for options that take a parameter is optional; whitespace
407 can be used instead.
408
409 startdit()
410 dit(bf(-h, --help)) Print a short help page describing the options
411 available in rsync.
412
413 dit(bf(--version)) print the rsync version number and exit.
414
415 dit(bf(-v, --verbose)) This option increases the amount of information you
416 are given during the transfer.  By default, rsync works silently. A
417 single bf(-v) will give you information about what files are being
418 transferred and a brief summary at the end. Two bf(-v) flags will give you
419 information on what files are being skipped and slightly more
420 information at the end. More than two bf(-v) flags should only be used if
421 you are debugging rsync.
422
423 Note that the names of the transferred files that are output are done using
424 a default bf(--log-format) of "%n%L", which tells you just the name of the
425 file and, if the item is a symlink, where it points.  At the single bf(-v)
426 level of verbosity, this does not mention when a file gets its attributes
427 changed.  If you ask for an itemized list of changed attributes (either
428 bf(--itemize-changes) or adding "%i" to the bf(--log-format) setting), the
429 output (on the client) increases to mention all items that are changed in
430 any way.  See the bf(--log-format) option for more details.
431
432 dit(bf(-q, --quiet)) This option decreases the amount of information you
433 are given during the transfer, notably suppressing information messages
434 from the remote server. This flag is useful when invoking rsync from
435 cron.
436
437 dit(bf(-I, --ignore-times)) Normally rsync will skip any files that are
438 already the same size and have the same modification time-stamp.
439 This option turns off this "quick check" behavior.
440
441 dit(bf(--size-only)) Normally rsync will not transfer any files that are
442 already the same size and have the same modification time-stamp. With the
443 bf(--size-only) option, files will not be transferred if they have the same size,
444 regardless of timestamp. This is useful when starting to use rsync
445 after using another mirroring system which may not preserve timestamps
446 exactly.
447
448 dit(bf(--modify-window)) When comparing two timestamps, rsync treats the
449 timestamps as being equal if they differ by no more than the modify-window
450 value.  This is normally 0 (for an exact match), but you may find it useful
451 to set this to a larger value in some situations.  In particular, when
452 transferring to or from an MS Windows FAT filesystem (which represents
453 times with a 2-second resolution), bf(--modify-window=1) is useful
454 (allowing times to differ by up to 1 second).
455
456 dit(bf(-c, --checksum)) This forces the sender to checksum all files using
457 a 128-bit MD4 checksum before transfer. The checksum is then
458 explicitly checked on the receiver and any files of the same name
459 which already exist and have the same checksum and size on the
460 receiver are not transferred.  This option can be quite slow.
461
462 dit(bf(-a, --archive)) This is equivalent to bf(-rlptgoD). It is a quick
463 way of saying you want recursion and want to preserve almost
464 everything.  The only exception to this is if bf(--files-from) was
465 specified, in which case bf(-d) is implied instead of bf(-r).
466
467 Note that bf(-a) bf(does not preserve hardlinks), because
468 finding multiply-linked files is expensive.  You must separately
469 specify bf(-H).
470
471 dit(bf(-r, --recursive)) This tells rsync to copy directories
472 recursively.  See also bf(--dirs) (bf(-d)).
473
474 dit(bf(-R, --relative)) Use relative paths. This means that the full path
475 names specified on the command line are sent to the server rather than
476 just the last parts of the filenames. This is particularly useful when
477 you want to send several different directories at the same time. For
478 example, if you used the command
479
480 quote(tt(   rsync /foo/bar/foo.c remote:/tmp/))
481
482 then this would create a file called foo.c in /tmp/ on the remote
483 machine. If instead you used
484
485 quote(tt(   rsync -R /foo/bar/foo.c remote:/tmp/))
486
487 then a file called /tmp/foo/bar/foo.c would be created on the remote
488 machine -- the full path name is preserved.  To limit the amount of
489 path information that is sent, do something like this:
490
491 quote(
492 tt(   cd /foo)nl()
493 tt(   rsync -R bar/foo.c remote:/tmp/)nl()
494 )
495
496 That would create /tmp/bar/foo.c on the remote machine.
497
498 dit(bf(--no-relative)) Turn off the bf(--relative) option.  This is only
499 needed if you want to use bf(--files-from) without its implied bf(--relative)
500 file processing.
501
502 dit(bf(--no-implied-dirs)) When combined with the bf(--relative) option, the
503 implied directories in each path are not explicitly duplicated as part
504 of the transfer.  This makes the transfer more optimal and also allows
505 the two sides to have non-matching symlinks in the implied part of the
506 path.  For instance, if you transfer the file "/path/foo/file" with bf(-R),
507 the default is for rsync to ensure that "/path" and "/path/foo" on the
508 destination exactly match the directories/symlinks of the source.  Using
509 the bf(--no-implied-dirs) option would omit both of these implied dirs,
510 which means that if "/path" was a real directory on one machine and a
511 symlink of the other machine, rsync would not try to change this.
512
513 dit(bf(-b, --backup)) With this option, preexisting destination files are
514 renamed as each file is transferred or deleted.  You can control where the
515 backup file goes and what (if any) suffix gets appended using the
516 bf(--backup-dir) and bf(--suffix) options.
517
518 dit(bf(--backup-dir=DIR)) In combination with the bf(--backup) option, this
519 tells rsync to store all backups in the specified directory. This is
520 very useful for incremental backups.  You can additionally
521 specify a backup suffix using the bf(--suffix) option
522 (otherwise the files backed up in the specified directory
523 will keep their original filenames).
524 If DIR is a relative path, it is relative to the destination directory
525 (which changes in a recursive transfer).
526
527 dit(bf(--suffix=SUFFIX)) This option allows you to override the default
528 backup suffix used with the bf(--backup) (bf(-b)) option. The default suffix is a ~
529 if no -bf(-backup-dir) was specified, otherwise it is an empty string.
530
531 dit(bf(-u, --update)) This forces rsync to skip any files which exist on
532 the destination and have a modified time that is newer than the source
533 file.  (If an existing destination file has a modify time equal to the
534 source file's, it will be updated if the sizes are different.)
535
536 In the current implementation of bf(--update), a difference of file format
537 between the sender and receiver is always
538 considered to be important enough for an update, no matter what date
539 is on the objects.  In other words, if the source has a directory or a
540 symlink where the destination has a file, the transfer would occur
541 regardless of the timestamps.  This might change in the future (feel
542 free to comment on this on the mailing list if you have an opinion).
543
544 dit(bf(--inplace)) This causes rsync not to create a new copy of the file
545 and then move it into place.  Instead rsync will overwrite the existing
546 file, meaning that the rsync algorithm can't accomplish the full amount of
547 network reduction it might be able to otherwise (since it does not yet try
548 to sort data matches).  One exception to this is if you combine the option
549 with bf(--backup), since rsync is smart enough to use the backup file as the
550 basis file for the transfer.
551
552 This option is useful for transfer of large files with block-based changes
553 or appended data, and also on systems that are disk bound, not network
554 bound.
555
556 The option implies bf(--partial) (since an interrupted transfer does not delete
557 the file), but conflicts with bf(--partial-dir) and bf(--delay-updates).
558 Prior to rsync 2.6.4 bf(--inplace) was also incompatible with bf(--compare-dest),
559 bf(--copy-dest), and bf(--link-dest).
560
561 WARNING: The file's data will be in an inconsistent state during the
562 transfer (and possibly afterward if the transfer gets interrupted), so you
563 should not use this option to update files that are in use.  Also note that
564 rsync will be unable to update a file in-place that is not writable by the
565 receiving user.
566
567 dit(bf(-d, --dirs)) Tell the sending side to include any directories that
568 are encountered.  Unlike bf(--recursive), a directory's contents are not copied
569 unless the directory was specified on the command-line as either "." or a
570 name with a trailing slash (e.g. "foo/").  Without this option or the
571 bf(--recursive) option, rsync will skip all directories it encounters (and
572 output a message to that effect for each one).
573
574 dit(bf(-l, --links)) When symlinks are encountered, recreate the
575 symlink on the destination.
576
577 dit(bf(-L, --copy-links)) When symlinks are encountered, the file that
578 they point to (the referent) is copied, rather than the symlink.  In older
579 versions of rsync, this option also had the side-effect of telling the
580 receiving side to follow symlinks, such as symlinks to directories.  In a
581 modern rsync such as this one, you'll need to specify bf(--keep-dirlinks) (bf(-K))
582 to get this extra behavior.  The only exception is when sending files to
583 an rsync that is too old to understand bf(-K) -- in that case, the bf(-L) option
584 will still have the side-effect of bf(-K) on that older receiving rsync.
585
586 dit(bf(--copy-unsafe-links)) This tells rsync to copy the referent of
587 symbolic links that point outside the copied tree.  Absolute symlinks
588 are also treated like ordinary files, and so are any symlinks in the
589 source path itself when bf(--relative) is used.
590
591 dit(bf(--safe-links)) This tells rsync to ignore any symbolic links
592 which point outside the copied tree. All absolute symlinks are
593 also ignored. Using this option in conjunction with bf(--relative) may
594 give unexpected results.
595
596 dit(bf(-H, --hard-links)) This tells rsync to recreate hard  links  on
597 the  remote system  to  be the same as the local system. Without this
598 option hard links are treated like regular files.
599
600 Note that rsync can only detect hard links if both parts of the link
601 are in the list of files being sent.
602
603 This option can be quite slow, so only use it if you need it.
604
605 dit(bf(-K, --keep-dirlinks)) On the receiving side, if a symlink is
606 pointing to a directory, it will be treated as matching a directory
607 from the sender.
608
609 dit(bf(-W, --whole-file)) With this option the incremental rsync algorithm
610 is not used and the whole file is sent as-is instead.  The transfer may be
611 faster if this option is used when the bandwidth between the source and
612 destination machines is higher than the bandwidth to disk (especially when the
613 "disk" is actually a networked filesystem).  This is the default when both
614 the source and destination are specified as local paths.
615
616 dit(bf(--no-whole-file)) Turn off bf(--whole-file), for use when it is the
617 default.
618
619 dit(bf(-p, --perms)) This option causes rsync to set the destination
620 permissions to be the same as the source permissions.
621
622 Without this option, each new file gets its permissions set based on the
623 source file's permissions and the umask at the receiving end, while all
624 other files (including updated files) retain their existing permissions
625 (which is the same behavior as other file-copy utilities, such as cp).
626
627 dit(bf(-o, --owner)) This option causes rsync to set the owner of the
628 destination file to be the same as the source file.  On most systems,
629 only the super-user can set file ownership.  By default, the preservation
630 is done by name, but may fall back to using the ID number in some
631 circumstances.  See the bf(--numeric-ids) option for a full discussion.
632
633 dit(bf(-g, --group)) This option causes rsync to set the group of the
634 destination file to be the same as the source file.  If the receiving
635 program is not running as the super-user, only groups that the
636 receiver is a member of will be preserved.  By default, the preservation
637 is done by name, but may fall back to using the ID number in some
638 circumstances.  See the bf(--numeric-ids) option for a full discussion.
639
640 dit(bf(-D, --devices)) This option causes rsync to transfer character and
641 block device information to the remote system to recreate these
642 devices. This option is only available to the super-user.
643
644 dit(bf(-t, --times)) This tells rsync to transfer modification times along
645 with the files and update them on the remote system.  Note that if this
646 option is not used, the optimization that excludes files that have not been
647 modified cannot be effective; in other words, a missing bf(-t) or bf(-a) will
648 cause the next transfer to behave as if it used bf(-I), causing all files to be
649 updated (though the rsync algorithm will make the update fairly efficient
650 if the files haven't actually changed, you're much better off using bf(-t)).
651
652 dit(bf(-O, --omit-dir-times)) This tells rsync to omit directories when
653 it is preserving modification times (see bf(--times)).  If NFS is sharing
654 the directories on the receiving side, it is a good idea to use bf(-O).
655
656 dit(bf(-n, --dry-run)) This tells rsync to not do any file transfers,
657 instead it will just report the actions it would have taken.
658
659 dit(bf(-S, --sparse)) Try to handle sparse files efficiently so they take
660 up less space on the destination.
661
662 NOTE: Don't use this option when the destination is a Solaris "tmpfs"
663 filesystem. It doesn't seem to handle seeks over null regions
664 correctly and ends up corrupting the files.
665
666 dit(bf(-x, --one-file-system)) This tells rsync not to cross filesystem
667 boundaries  when recursing.  This  is useful for transferring the
668 contents of only one filesystem.
669
670 dit(bf(--existing)) This tells rsync not to create any new files --
671 only update files that already exist on the destination.
672
673 dit(bf(--ignore-existing))
674 This tells rsync not to update files that already exist on
675 the destination.
676
677 dit(bf(--delete)) This tells rsync to delete extraneous files from the
678 receiving side (ones that aren't on the sending side), but only for the
679 directories that are being synchronized.  You must have asked rsync to
680 send the whole directory (e.g. "dir" or "dir/") without using a wildcard
681 for the directory's contents (e.g. "dir/*") since the wildcard is expanded
682 by the shell and rsync thus gets a request to transfer individual files, not
683 the files' parent directory.  Files that are excluded from transfer are
684 also excluded from being deleted unless you use the bf(--delete-excluded)
685 option or mark the rules as only matching on the sending side (see the
686 include/exclude modifiers in the FILTER RULES section).
687
688 This option has no effect unless directory recursion is enabled.
689
690 This option can be dangerous if used incorrectly!  It is a very good idea
691 to run first using the bf(--dry-run) option (bf(-n)) to see what files would be
692 deleted to make sure important files aren't listed.
693
694 If the sending side detects any I/O errors, then the deletion of any
695 files at the destination will be automatically disabled. This is to
696 prevent temporary filesystem failures (such as NFS errors) on the
697 sending side causing a massive deletion of files on the
698 destination.  You can override this with the bf(--ignore-errors) option.
699
700 The bf(--delete) option may be combined with one of the --delete-WHEN options
701 without conflict, as well as bf(--delete-excluded).  However, if none of the
702 --delete-WHEN options are specified, rsync will currently choose the
703 bf(--delete-before) algorithm.  A future version may change this to choose the
704 bf(--delete-during) algorithm.  See also bf(--delete-after).
705
706 dit(bf(--delete-before)) Request that the file-deletions on the receiving
707 side be done before the transfer starts.  This is the default if bf(--delete)
708 or bf(--delete-excluded) is specified without one of the --delete-WHEN options.
709 See bf(--delete) (which is implied) for more details on file-deletion.
710
711 Deleting before the transfer is helpful if the filesystem is tight for space
712 and removing extraneous files would help to make the transfer possible.
713 However, it does introduce a delay before the start of the transfer,
714 and this delay might cause the transfer to timeout (if bf(--timeout) was
715 specified).
716
717 dit(bf(--delete-during, --del)) Request that the file-deletions on the
718 receiving side be done incrementally as the transfer happens.  This is
719 a faster method than choosing the before- or after-transfer algorithm,
720 but it is only supported beginning with rsync version 2.6.4.
721 See bf(--delete) (which is implied) for more details on file-deletion.
722
723 dit(bf(--delete-after)) Request that the file-deletions on the receiving
724 side be done after the transfer has completed.  This is useful if you
725 are sending new per-directory merge files as a part of the transfer and
726 you want their exclusions to take effect for the delete phase of the
727 current transfer.
728 See bf(--delete) (which is implied) for more details on file-deletion.
729
730 dit(bf(--delete-excluded)) In addition to deleting the files on the
731 receiving side that are not on the sending side, this tells rsync to also
732 delete any files on the receiving side that are excluded (see bf(--exclude)).
733 See the FILTER RULES section for a way to make individual exclusions behave
734 this way on the receiver, and for a way to protect files from
735 bf(--delete-excluded).
736 See bf(--delete) (which is implied) for more details on file-deletion.
737
738 dit(bf(--ignore-errors)) Tells bf(--delete) to go ahead and delete files
739 even when there are I/O errors.
740
741 dit(bf(--force)) This options tells rsync to delete directories even if
742 they are not empty when they are to be replaced by non-directories.  This
743 is only relevant without bf(--delete) because deletions are now done depth-first.
744 Requires the bf(--recursive) option (which is implied by bf(-a)) to have any effect.
745
746 dit(bf(--max-delete=NUM)) This tells rsync not to delete more than NUM
747 files or directories. This is useful when mirroring very large trees
748 to prevent disasters.
749
750 dit(bf(--max-size=SIZE)) This tells rsync to avoid transferring any
751 file that is larger than the specified SIZE. The SIZE value can be
752 suffixed with a letter to indicate a size multiplier (K, M, or G) and
753 may be a fractional value (e.g. "bf(--max-size=1.5m)").
754
755 dit(bf(-B, --block-size=BLOCKSIZE)) This forces the block size used in
756 the rsync algorithm to a fixed value.  It is normally selected based on
757 the size of each file being updated.  See the technical report for details.
758
759 dit(bf(-e, --rsh=COMMAND)) This option allows you to choose an alternative
760 remote shell program to use for communication between the local and
761 remote copies of rsync. Typically, rsync is configured to use ssh by
762 default, but you may prefer to use rsh on a local network.
763
764 If this option is used with bf([user@]host::module/path), then the
765 remote shell em(COMMAND) will be used to run an rsync server on the
766 remote host, and all data will be transmitted through that remote
767 shell connection, rather than through a direct socket connection to a
768 running rsync server on the remote host.  See the section "CONNECTING
769 TO AN RSYNC SERVER OVER A REMOTE SHELL PROGRAM" above.
770
771 Command-line arguments are permitted in COMMAND provided that COMMAND is
772 presented to rsync as a single argument.  For example:
773
774 quote(tt(   -e "ssh -p 2234"))
775
776 (Note that ssh users can alternately customize site-specific connect
777 options in their .ssh/config file.)
778
779 You can also choose the remote shell program using the RSYNC_RSH
780 environment variable, which accepts the same range of values as bf(-e).
781
782 See also the bf(--blocking-io) option which is affected by this option.
783
784 dit(bf(--rsync-path=PATH)) Use this to specify the path to the copy of
785 rsync on the remote machine. Useful when it's not in your path. Note
786 that this is the full path to the binary, not just the directory that
787 the binary is in.
788
789 dit(bf(-C, --cvs-exclude)) This is a useful shorthand for excluding a
790 broad range of files that you often don't want to transfer between
791 systems. It uses the same algorithm that CVS uses to determine if
792 a file should be ignored.
793
794 The exclude list is initialized to:
795
796 quote(quote(tt(RCS SCCS CVS CVS.adm RCSLOG cvslog.* tags TAGS .make.state
797 .nse_depinfo *~ #* .#* ,* _$* *$ *.old *.bak *.BAK *.orig *.rej
798 .del-* *.a *.olb *.o *.obj *.so *.exe *.Z *.elc *.ln core .svn/)))
799
800 then files listed in a $HOME/.cvsignore are added to the list and any
801 files listed in the CVSIGNORE environment variable (all cvsignore names
802 are delimited by whitespace).
803
804 Finally, any file is ignored if it is in the same directory as a
805 .cvsignore file and matches one of the patterns listed therein.  Unlike
806 rsync's filter/exclude files, these patterns are split on whitespace.
807 See the bf(cvs(1)) manual for more information.
808
809 If you're combining bf(-C) with your own bf(--filter) rules, you should
810 note that these CVS excludes are appended at the end of your own rules,
811 regardless of where the -C was placed on the command-line.  This makes them
812 a lower priority than any rules you specified explicitly.  If you want to
813 control where these CVS excludes get inserted into your filter rules, you
814 should omit the bf(-C) as a command-line option and use a combination of
815 bf(--filter=:C) and bf(--filter=-C) (either on your command-line or by
816 putting the ":C" and "-C" rules into a filter file with your other rules).
817 The first option turns on the per-directory scanning for the .cvsignore
818 file.  The second option does a one-time import of the CVS excludes
819 mentioned above.
820
821 dit(bf(-f, --filter=RULE)) This option allows you to add rules to selectively
822 exclude certain files from the list of files to be transferred. This is
823 most useful in combination with a recursive transfer.
824
825 You may use as many bf(--filter) options on the command line as you like
826 to build up the list of files to exclude.
827
828 See the FILTER RULES section for detailed information on this option.
829
830 dit(bf(-F)) The bf(-F) option is a shorthand for adding two bf(--filter) rules to
831 your command.  The first time it is used is a shorthand for this rule:
832
833 quote(tt(   --filter=': /.rsync-filter'))
834
835 This tells rsync to look for per-directory .rsync-filter files that have
836 been sprinkled through the hierarchy and use their rules to filter the
837 files in the transfer.  If bf(-F) is repeated, it is a shorthand for this
838 rule:
839
840 quote(tt(   --filter='- .rsync-filter'))
841
842 This filters out the .rsync-filter files themselves from the transfer.
843
844 See the FILTER RULES section for detailed information on how these options
845 work.
846
847 dit(bf(--exclude=PATTERN)) This option is a simplified form of the
848 bf(--filter) option that defaults to an exclude rule and does not allow
849 the full rule-parsing syntax of normal filter rules.
850
851 See the FILTER RULES section for detailed information on this option.
852
853 dit(bf(--exclude-from=FILE)) This option is similar to the bf(--exclude)
854 option, but instead it adds all exclude patterns listed in the file
855 FILE to the exclude list.  Blank lines in FILE and lines starting with
856 ';' or '#' are ignored.
857 If em(FILE) is bf(-) the list will be read from standard input.
858
859 dit(bf(--include=PATTERN)) This option is a simplified form of the
860 bf(--filter) option that defaults to an include rule and does not allow
861 the full rule-parsing syntax of normal filter rules.
862
863 See the FILTER RULES section for detailed information on this option.
864
865 dit(bf(--include-from=FILE)) This specifies a list of include patterns
866 from a file.
867 If em(FILE) is "-" the list will be read from standard input.
868
869 dit(bf(--files-from=FILE)) Using this option allows you to specify the
870 exact list of files to transfer (as read from the specified FILE or "-"
871 for standard input).  It also tweaks the default behavior of rsync to make
872 transferring just the specified files and directories easier:
873
874 quote(itemize(
875   it() The bf(--relative) (bf(-R)) option is implied, which preserves the path
876   information that is specified for each item in the file (use
877   bf(--no-relative) if you want to turn that off).
878   it() The bf(--dirs) (bf(-d)) option is implied, which will create directories
879   specified in the list on the destination rather than noisily skipping
880   them.
881   it() The bf(--archive) (bf(-a)) option's behavior does not imply bf(--recursive)
882   (bf(-r)), so specify it explicitly, if you want it.
883 ))
884
885 The file names that are read from the FILE are all relative to the
886 source dir -- any leading slashes are removed and no ".." references are
887 allowed to go higher than the source dir.  For example, take this
888 command:
889
890 quote(tt(   rsync -a --files-from=/tmp/foo /usr remote:/backup))
891
892 If /tmp/foo contains the string "bin" (or even "/bin"), the /usr/bin
893 directory will be created as /backup/bin on the remote host (but the
894 contents of the /usr/bin dir would not be sent unless you specified bf(-r)
895 or the names were explicitly listed in /tmp/foo).  Also keep in mind
896 that the effect of the (enabled by default) bf(--relative) option is to
897 duplicate only the path info that is read from the file -- it does not
898 force the duplication of the source-spec path (/usr in this case).
899
900 In addition, the bf(--files-from) file can be read from the remote host
901 instead of the local host if you specify a "host:" in front of the file
902 (the host must match one end of the transfer).  As a short-cut, you can
903 specify just a prefix of ":" to mean "use the remote end of the
904 transfer".  For example:
905
906 quote(tt(   rsync -a --files-from=:/path/file-list src:/ /tmp/copy))
907
908 This would copy all the files specified in the /path/file-list file that
909 was located on the remote "src" host.
910
911 dit(bf(-0, --from0)) This tells rsync that the filenames it reads from a
912 file are terminated by a null ('\0') character, not a NL, CR, or CR+LF.
913 This affects bf(--exclude-from), bf(--include-from), bf(--files-from), and any
914 merged files specified in a bf(--filter) rule.
915 It does not affect bf(--cvs-exclude) (since all names read from a .cvsignore
916 file are split on whitespace).
917
918 dit(bf(-T, --temp-dir=DIR)) This option instructs rsync to use DIR as a
919 scratch directory when creating temporary copies of the files
920 transferred on the receiving side.  The default behavior is to create
921 the temporary files in the receiving directory.
922
923 dit(bf(-y, --fuzzy)) This option tells rsync that it should look for a
924 basis file for any destination file that is missing.  The current algorithm
925 looks in the same directory as the destination file for either a file that
926 has an identical size and modified-time, or a similarly-named file.  If
927 found, rsync uses the fuzzy basis file to try to speed up the transfer.
928
929 Note that the use of the bf(--delete) option might get rid of any potential
930 fuzzy-match files, so either use bf(--delete-after) or specify some
931 filename exclusions if you need to prevent this.
932
933 dit(bf(--compare-dest=DIR)) This option instructs rsync to use em(DIR) on
934 the destination machine as an additional hierarchy to compare destination
935 files against doing transfers (if the files are missing in the destination
936 directory).  If a file is found in em(DIR) that is identical to the
937 sender's file, the file will NOT be transferred to the destination
938 directory.  This is useful for creating a sparse backup of just files that
939 have changed from an earlier backup.
940
941 Beginning in version 2.6.4, multiple bf(--compare-dest) directories may be
942 provided and rsync will search the list in the order specified until it
943 finds an existing file.  That first discovery is used as the basis file,
944 and also determines if the transfer needs to happen.
945
946 If em(DIR) is a relative path, it is relative to the destination directory.
947 See also bf(--copy-dest) and bf(--link-dest).
948
949 dit(bf(--copy-dest=DIR)) This option behaves like bf(--compare-dest), but
950 rsync will also copy unchanged files found in em(DIR) to the destination
951 directory (using the data in the em(DIR) for an efficient copy).  This is
952 useful for doing transfers to a new destination while leaving existing
953 files intact, and then doing a flash-cutover when all files have been
954 successfully transferred.
955
956 If em(DIR) is a relative path, it is relative to the destination directory.
957 See also bf(--compare-dest) and bf(--link-dest).
958
959 dit(bf(--link-dest=DIR)) This option behaves like bf(--copy-dest), but
960 unchanged files are hard linked from em(DIR) to the destination directory.
961 The files must be identical in all preserved attributes (e.g. permissions,
962 possibly ownership) in order for the files to be linked together.
963 An example:
964
965 quote(tt(  rsync -av --link-dest=$PWD/prior_dir host:src_dir/ new_dir/))
966
967 Beginning with version 2.6.4, if more than one bf(--link-dest) option is
968 specified, rsync will try to find an exact match to link with (searching
969 the list in the order specified), and if not found, a basis file from one
970 of the em(DIR)s will be selected to try to speed up the transfer.
971
972 If em(DIR) is a relative path, it is relative to the destination directory.
973 See also bf(--compare-dest) and bf(--copy-dest).
974
975 Note that rsync versions prior to 2.6.1 had a bug that could prevent
976 bf(--link-dest) from working properly for a non-root user when bf(-o) was specified
977 (or implied by bf(-a)).  You can work-around this bug by avoiding the bf(-o) option
978 when sending to an old rsync.
979
980 dit(bf(-z, --compress)) With this option, rsync compresses the file data
981 as it is sent to the destination machine, which reduces the amount of data
982 being transmitted -- something that is useful over a slow connection.
983
984 Note this this option typically achieves better compression ratios that can
985 be achieved by using a compressing remote shell or a compressing transport
986 because it takes advantage of the implicit information in the matching data
987 blocks that are not explicitly sent over the connection.
988
989 dit(bf(--numeric-ids)) With this option rsync will transfer numeric group
990 and user IDs rather than using user and group names and mapping them
991 at both ends.
992
993 By default rsync will use the username and groupname to determine
994 what ownership to give files. The special uid 0 and the special group
995 0 are never mapped via user/group names even if the bf(--numeric-ids)
996 option is not specified.
997
998 If a user or group has no name on the source system or it has no match
999 on the destination system, then the numeric ID
1000 from the source system is used instead.  See also the comments on the
1001 "use chroot" setting in the rsyncd.conf manpage for information on how
1002 the chroot setting affects rsync's ability to look up the names of the
1003 users and groups and what you can do about it.
1004
1005 dit(bf(--timeout=TIMEOUT)) This option allows you to set a maximum I/O
1006 timeout in seconds. If no data is transferred for the specified time
1007 then rsync will exit. The default is 0, which means no timeout.
1008
1009 dit(bf(--port=PORT)) This specifies an alternate TCP port number to use
1010 rather than the default of 873.  This is only needed if you are using the
1011 double-colon (::) syntax to connect with an rsync daemon (since the URL
1012 syntax has a way to specify the port as a part of the URL).  See also this
1013 option in the bf(--daemon) mode section.
1014
1015 dit(bf(--blocking-io)) This tells rsync to use blocking I/O when launching
1016 a remote shell transport.  If the remote shell is either rsh or remsh,
1017 rsync defaults to using
1018 blocking I/O, otherwise it defaults to using non-blocking I/O.  (Note that
1019 ssh prefers non-blocking I/O.)
1020
1021 dit(bf(--no-blocking-io)) Turn off bf(--blocking-io), for use when it is the
1022 default.
1023
1024 dit(bf(-i, --itemize-changes)) Requests a simple itemized list of the
1025 changes that are being made to each file, including attribute changes.
1026 This is equivalent to specifying bf(--log-format='%i %n%L').  (See the
1027 description of what the output of '%i' means in the rsyncd.conf manpage.)
1028 Rsync also mentions the delete action when an item replaces an item of a
1029 different type (e.g. a directory replaces a file of the same name).
1030
1031 dit(bf(--log-format=FORMAT)) This allows you to specify exactly what the
1032 rsync client logs to stdout on a per-file basis. This format can be used
1033 without bf(--verbose) to enable just the outputting of the file-transfer
1034 information, or it can be used to change how the names are output when
1035 bf(--verbose) is enabled.  Rsync will log the name of an item prior to its
1036 transfer unless one of the transferred-byte-count values is requested, in
1037 which case the logging is done at the end of the item's transfer.  In this
1038 late-transfer state, if bf(--progress) is also specified, rsync will output
1039 just the name of the file prior to the progress information.
1040
1041 The log format is specified using the same format conventions as the
1042 "log format" option in rsyncd.conf, so see that manpage for details.
1043 (Note that this option does not affect what a daemon logs to its logfile.)
1044
1045 dit(bf(--stats)) This tells rsync to print a verbose set of statistics
1046 on the file transfer, allowing you to tell how effective the rsync
1047 algorithm is for your data.
1048
1049 dit(bf(--partial)) By default, rsync will delete any partially
1050 transferred file if the transfer is interrupted. In some circumstances
1051 it is more desirable to keep partially transferred files. Using the
1052 bf(--partial) option tells rsync to keep the partial file which should
1053 make a subsequent transfer of the rest of the file much faster.
1054
1055 dit(bf(--partial-dir=DIR)) A better way to keep partial files than the
1056 bf(--partial) option is to specify a em(DIR) that will be used to hold the
1057 partial data (instead of writing it out to the destination file).
1058 On the next transfer, rsync will use a file found in this
1059 dir as data to speed up the resumption of the transfer and then deletes it
1060 after it has served its purpose.
1061 Note that if bf(--whole-file) is specified (or implied), any partial-dir
1062 file that is found for a file that is being updated will simply be removed
1063 (since
1064 rsync is sending files without using the incremental rsync algorithm).
1065
1066 Rsync will create the em(DIR) if it is missing (just the last dir -- not
1067 the whole path).  This makes it easy to use a relative path (such as
1068 "bf(--partial-dir=.rsync-partial)") to have rsync create the
1069 partial-directory in the destination file's directory when needed, and then
1070 remove it again when the partial file is deleted.
1071
1072 If the partial-dir value is not an absolute path, rsync will also add a directory
1073 bf(--exclude) of this value at the end of all your existing excludes.  This
1074 will prevent partial-dir files from being transferred and also prevent the
1075 untimely deletion of partial-dir items on the receiving side.  An example:
1076 the above bf(--partial-dir) option would add an "bf(--exclude=.rsync-partial/)"
1077 rule at the end of any other filter rules.  Note that if you are
1078 supplying your own filter rules, you may need to manually insert a
1079 rule for this directory exclusion somewhere higher up in the list so that
1080 it has a high enough priority to be effective (e.g., if your rules specify
1081 a trailing bf(--exclude='*') rule, the auto-added rule would never be
1082 reached).
1083
1084 IMPORTANT: the bf(--partial-dir) should not be writable by other users or it
1085 is a security risk.  E.g. AVOID "/tmp".
1086
1087 You can also set the partial-dir value the RSYNC_PARTIAL_DIR environment
1088 variable.  Setting this in the environment does not force bf(--partial) to be
1089 enabled, but rather it effects where partial files go when bf(--partial) is
1090 specified.  For instance, instead of using bf(--partial-dir=.rsync-tmp)
1091 along with bf(--progress), you could set RSYNC_PARTIAL_DIR=.rsync-tmp in your
1092 environment and then just use the bf(-P) option to turn on the use of the
1093 .rsync-tmp dir for partial transfers.  The only time that the bf(--partial)
1094 option does not look for this environment value is (1) when bf(--inplace) was
1095 specified (since bf(--inplace) conflicts with bf(--partial-dir)), or (2) when
1096 bf(--delay-updates) was specified (see below).
1097
1098 For the purposes of the server-config's "refuse options" setting,
1099 bf(--partial-dir) does em(not) imply bf(--partial).  This is so that a
1100 refusal of the bf(--partial) option can be used to disallow the overwriting
1101 of destination files with a partial transfer, while still allowing the
1102 safer idiom provided by bf(--partial-dir).
1103
1104 dit(bf(--delay-updates)) This option puts the temporary file from each
1105 updated file into a holding directory until the end of the
1106 transfer, at which time all the files are renamed into place in rapid
1107 succession.  This attempts to make the updating of the files a little more
1108 atomic.  By default the files are placed into a directory named ".~tmp~" in
1109 each file's destination directory, but you can override this by specifying
1110 the bf(--partial-dir) option.  (Note that RSYNC_PARTIAL_DIR has no effect
1111 on this value, nor is bf(--partial-dir) considered to be implied for the
1112 purposes of the server-config's "refuse options" setting.)
1113 Conflicts with bf(--inplace).
1114
1115 This option uses more memory on the receiving side (one bit per file
1116 transferred) and also requires enough free disk space on the receiving
1117 side to hold an additional copy of all the updated files.  Note also that
1118 you should not use an absolute path to bf(--partial-dir) unless there is no
1119 chance of any of the files in the transfer having the same name (since all
1120 the updated files will be put into a single directory if the path is
1121 absolute).
1122
1123 See also the "atomic-rsync" perl script in the "support" subdir for an
1124 update algorithm that is even more atomic (it uses bf(--link-dest) and a
1125 parallel hierarchy of files).
1126
1127 dit(bf(--progress)) This option tells rsync to print information
1128 showing the progress of the transfer. This gives a bored user
1129 something to watch.
1130 Implies bf(--verbose) if it wasn't already specified.
1131
1132 When the file is transferring, the data looks like this:
1133
1134 verb(      782448  63%  110.64kB/s    0:00:04)
1135
1136 This tells you the current file size, the percentage of the transfer that
1137 is complete, the current calculated file-completion rate (including both
1138 data over the wire and data being matched locally), and the estimated time
1139 remaining in this transfer.
1140
1141 After a file is complete, the data looks like this:
1142
1143 verb(     1238099 100%  146.38kB/s    0:00:08  (5, 57.1% of 396))
1144
1145 This tells you the final file size, that it's 100% complete, the final
1146 transfer rate for the file, the amount of elapsed time it took to transfer
1147 the file, and the addition of a total-transfer summary in parentheses.
1148 These additional numbers tell you how many files have been updated, and
1149 what percent of the total number of files has been scanned.
1150
1151 dit(bf(-P)) The bf(-P) option is equivalent to bf(--partial) bf(--progress).  Its
1152 purpose is to make it much easier to specify these two options for a long
1153 transfer that may be interrupted.
1154
1155 dit(bf(--password-file)) This option allows you to provide a password
1156 in a file for accessing a remote rsync server. Note that this option
1157 is only useful when accessing an rsync server using the built in
1158 transport, not when using a remote shell as the transport. The file
1159 must not be world readable. It should contain just the password as a
1160 single line.
1161
1162 dit(bf(--list-only)) This option will cause the source files to be listed
1163 instead of transferred.  This option is inferred if there is no destination
1164 specified, so you don't usually need to use it explicitly.  However, it can
1165 come in handy for a power user that wants to avoid the "bf(-r --exclude='/*/*')"
1166 options that rsync might use as a compatibility kluge when generating a
1167 non-recursive listing.
1168
1169 dit(bf(--bwlimit=KBPS)) This option allows you to specify a maximum
1170 transfer rate in kilobytes per second. This option is most effective when
1171 using rsync with large files (several megabytes and up). Due to the nature
1172 of rsync transfers, blocks of data are sent, then if rsync determines the
1173 transfer was too fast, it will wait before sending the next data block. The
1174 result is an average transfer rate equaling the specified limit. A value
1175 of zero specifies no limit.
1176
1177 dit(bf(--write-batch=FILE)) Record a file that can later be applied to
1178 another identical destination with bf(--read-batch). See the "BATCH MODE"
1179 section for details.
1180
1181 dit(bf(--read-batch=FILE)) Apply all of the changes stored in FILE, a
1182 file previously generated by bf(--write-batch).
1183 If em(FILE) is "-" the batch data will be read from standard input.
1184 See the "BATCH MODE" section for details.
1185
1186 dit(bf(-4, --ipv4) or bf(-6, --ipv6)) Tells rsync to prefer IPv4/IPv6
1187 when creating sockets.  This only affects sockets that rsync has direct
1188 control over, such as the outgoing socket when directly contacting an
1189 rsync daemon.  See also these options in the bf(--daemon) mode section.
1190
1191 dit(bf(--checksum-seed=NUM)) Set the MD4 checksum seed to the integer
1192 NUM.  This 4 byte checksum seed is included in each block and file
1193 MD4 checksum calculation.  By default the checksum seed is generated
1194 by the server and defaults to the current time().  This option
1195 is used to set a specific checksum seed, which is useful for
1196 applications that want repeatable block and file checksums, or
1197 in the case where the user wants a more random checksum seed.
1198 Note that setting NUM to 0 causes rsync to use the default of time()
1199 for checksum seed.
1200 enddit()
1201
1202 manpagesection(DAEMON OPTIONS)
1203
1204 The options allowed when starting an rsync daemon are as follows:
1205
1206 startdit()
1207 dit(bf(--daemon)) This tells rsync that it is to run as a daemon.  The
1208 daemon may be accessed using the bf(host::module) or
1209 bf(rsync://host/module/) syntax.
1210
1211 If standard input is a socket then rsync will assume that it is being
1212 run via inetd, otherwise it will detach from the current terminal and
1213 become a background daemon.  The daemon will read the config file
1214 (rsyncd.conf) on each connect made by a client and respond to
1215 requests accordingly.  See the rsyncd.conf(5) man page for more
1216 details.
1217
1218 dit(bf(--address)) By default rsync will bind to the wildcard address
1219 when run as a daemon with the bf(--daemon) option or when connecting to a
1220 rsync server. The bf(--address) option allows you to specify a specific IP
1221 address (or hostname) to bind to. This makes virtual hosting possible
1222 in conjunction with the bf(--config) option.  See also the "address" global
1223 option in the rsyncd.conf manpage.
1224
1225 dit(bf(--bwlimit=KBPS)) This option allows you to specify a maximum
1226 transfer rate in kilobytes per second for the data the daemon sends.
1227 The client can still specify a smaller bf(--bwlimit) value, but their
1228 requested value will be rounded down if they try to exceed it.  See the
1229 client version of this option (above) for some extra details.
1230
1231 dit(bf(--config=FILE)) This specifies an alternate config file than
1232 the default.  This is only relevant when bf(--daemon) is specified.
1233 The default is /etc/rsyncd.conf unless the daemon is running over
1234 a remote shell program and the remote user is not root; in that case
1235 the default is rsyncd.conf in the current directory (typically $HOME).
1236
1237 dit(bf(--no-detach)) When running as a daemon, this option instructs
1238 rsync to not detach itself and become a background process.  This
1239 option is required when running as a service on Cygwin, and may also
1240 be useful when rsync is supervised by a program such as
1241 bf(daemontools) or AIX's bf(System Resource Controller).
1242 bf(--no-detach) is also recommended when rsync is run under a
1243 debugger.  This option has no effect if rsync is run from inetd or
1244 sshd.
1245
1246 dit(bf(--port=PORT)) This specifies an alternate TCP port number for the
1247 daemon to listen on rather than the default of 873.  See also the "port"
1248 global option in the rsyncd.conf manpage.
1249
1250 dit(bf(-v, --verbose)) This option increases the amount of information the
1251 daemon logs during its startup phase.  After the client connects, the
1252 daemon's verbosity level will be controlled by the options that the client
1253 used and the "max verbosity" setting in the module's config section.
1254
1255 dit(bf(-4, --ipv4) or bf(-6, --ipv6)) Tells rsync to prefer IPv4/IPv6
1256 when creating the incoming sockets that the rsync daemon will use to
1257 listen for connections.  One of these options may be required in older
1258 versions of Linux to work around an IPv6 bug in the kernel (if you see
1259 an "address already in use" error when nothing else is using the port,
1260 try specifying bf(--ipv6) or bf(--ipv4) when starting the daemon).
1261
1262 dit(bf(-h, --help)) When specified after bf(--daemon), print a short help
1263 page describing the options available for starting an rsync daemon.
1264 enddit()
1265
1266 manpagesection(FILTER RULES)
1267
1268 The filter rules allow for flexible selection of which files to transfer
1269 (include) and which files to skip (exclude).  The rules either directly
1270 specify include/exclude patterns or they specify a way to acquire more
1271 include/exclude patterns (e.g. to read them from a file).
1272
1273 As the list of files/directories to transfer is built, rsync checks each
1274 name to be transferred against the list of include/exclude patterns in
1275 turn, and the first matching pattern is acted on:  if it is an exclude
1276 pattern, then that file is skipped; if it is an include pattern then that
1277 filename is not skipped; if no matching pattern is found, then the
1278 filename is not skipped.
1279
1280 Rsync builds an ordered list of filter rules as specified on the
1281 command-line.  Filter rules have the following syntax:
1282
1283 quote(
1284 tt(RULE [PATTERN_OR_FILENAME])nl()
1285 tt(RULE,MODIFIERS [PATTERN_OR_FILENAME])nl()
1286 )
1287
1288 You have your choice of using either short or long RULE names, as described
1289 below.  If you use a short-named rule, the ',' separating the RULE from the
1290 MODIFIERS is optional.  The PATTERN or FILENAME that follows (when present)
1291 must come after either a single space or an underscore (_).
1292 Here are the available rule prefixes:
1293
1294 quote(
1295 bf(exclude, -) specifies an exclude pattern. nl()
1296 bf(include, +) specifies an include pattern. nl()
1297 bf(merge, .) specifies a merge-file to read for more rules. nl()
1298 bf(dir-merge, :) specifies a per-directory merge-file. nl()
1299 bf(hide, H) specifies a pattern for hiding files from the transfer. nl()
1300 bf(show, S) files that match the pattern are not hidden. nl()
1301 bf(protect, P) specifies a pattern for protecting files from deletion. nl()
1302 bf(risk, R) files that match the pattern are not protected. nl()
1303 bf(clear, !) clears the current include/exclude list (takes no arg) nl()
1304 )
1305
1306 When rules are being read from a file, empty lines are ignored, as are
1307 comment lines that start with a "#".
1308
1309 Note that the bf(--include)/bf(--exclude) command-line options do not allow the
1310 full range of rule parsing as described above -- they only allow the
1311 specification of include/exclude patterns plus a "!" token to clear the
1312 list (and the normal comment parsing when rules are read from a file).
1313 If a pattern
1314 does not begin with "- " (dash, space) or "+ " (plus, space), then the
1315 rule will be interpreted as if "+ " (for an include option) or "- " (for
1316 an exclude option) were prefixed to the string.  A bf(--filter) option, on
1317 the other hand, must always contain either a short or long rule name at the
1318 start of the rule.
1319
1320 Note also that the bf(--filter), bf(--include), and bf(--exclude) options take one
1321 rule/pattern each. To add multiple ones, you can repeat the options on
1322 the command-line, use the merge-file syntax of the bf(--filter) option, or
1323 the bf(--include-from)/bf(--exclude-from) options.
1324
1325 manpagesection(INCLUDE/EXCLUDE PATTERN RULES)
1326
1327 You can include and exclude files by specifying patterns using the "+",
1328 "-", etc. filter rules (as introduced in the FILTER RULES section above).
1329 The include/exclude rules each specify a pattern that is matched against
1330 the names of the files that are going to be transferred.  These patterns
1331 can take several forms:
1332
1333 itemize(
1334   it() if the pattern starts with a / then it is anchored to a
1335   particular spot in the hierarchy of files, otherwise it is matched
1336   against the end of the pathname.  This is similar to a leading ^ in
1337   regular expressions.
1338   Thus "/foo" would match a file called "foo" at either the "root of the
1339   transfer" (for a global rule) or in the merge-file's directory (for a
1340   per-directory rule).
1341   An unqualified "foo" would match any file or directory named "foo"
1342   anywhere in the tree because the algorithm is applied recursively from
1343   the
1344   top down; it behaves as if each path component gets a turn at being the
1345   end of the file name.  Even the unanchored "sub/foo" would match at
1346   any point in the hierarchy where a "foo" was found within a directory
1347   named "sub".  See the section on ANCHORING INCLUDE/EXCLUDE PATTERNS for
1348   a full discussion of how to specify a pattern that matches at the root
1349   of the transfer.
1350   it() if the pattern ends with a / then it will only match a
1351   directory, not a file, link, or device.
1352   it() if the pattern contains a wildcard character from the set
1353   *?[ then expression matching is applied using the shell filename
1354   matching rules. Otherwise a simple string match is used.
1355   it() the double asterisk pattern "**" will match slashes while a
1356   single asterisk pattern "*" will stop at slashes.
1357   it() if the pattern contains a / (not counting a trailing /) or a "**"
1358   then it is matched against the full pathname, including any leading
1359   directories. If the pattern doesn't contain a / or a "**", then it is
1360   matched only against the final component of the filename.
1361   (Remember that the algorithm is applied recursively so "full filename"
1362   can actually be any portion of a path from the starting directory on
1363   down.)
1364 )
1365
1366 Note that, when using the bf(--recursive) (bf(-r)) option (which is implied by
1367 bf(-a)), every subcomponent of every path is visited from the top down, so
1368 include/exclude patterns get applied recursively to each subcomponent's
1369 full name (e.g. to include "/foo/bar/baz" the subcomponents "/foo" and
1370 "/foo/bar" must not be excluded).
1371 The exclude patterns actually short-circuit the directory traversal stage
1372 when rsync finds the files to send.  If a pattern excludes a particular
1373 parent directory, it can render a deeper include pattern ineffectual
1374 because rsync did not descend through that excluded section of the
1375 hierarchy.  This is particularly important when using a trailing '*' rule.
1376 For instance, this won't work:
1377
1378 quote(
1379 tt(+ /some/path/this-file-will-not-be-found)nl()
1380 tt(+ /file-is-included)nl()
1381 tt(- *)nl()
1382 )
1383
1384 This fails because the parent directory "some" is excluded by the '*'
1385 rule, so rsync never visits any of the files in the "some" or "some/path"
1386 directories.  One solution is to ask for all directories in the hierarchy
1387 to be included by using a single rule: "+ */" (put it somewhere before the
1388 "- *" rule).  Another solution is to add specific include rules for all
1389 the parent dirs that need to be visited.  For instance, this set of rules
1390 works fine:
1391
1392 quote(
1393 tt(+ /some/)nl()
1394 tt(+ /some/path/)nl()
1395 tt(+ /some/path/this-file-is-found)nl()
1396 tt(+ /file-also-included)nl()
1397 tt(- *)nl()
1398 )
1399
1400 Here are some examples of exclude/include matching:
1401
1402 itemize(
1403   it() "- *.o" would exclude all filenames matching *.o
1404   it() "- /foo" would exclude a file called foo in the transfer-root directory
1405   it() "- foo/" would exclude any directory called foo
1406   it() "- /foo/*/bar" would exclude any file called bar two
1407   levels below a directory called foo in the transfer-root directory
1408   it() "- /foo/**/bar" would exclude any file called bar two
1409   or more levels below a directory called foo in the transfer-root directory
1410   it() The combination of "+ */", "+ *.c", and "- *" would include all
1411   directories and C source files but nothing else.
1412   it() The combination of "+ foo/", "+ foo/bar.c", and "- *" would include
1413   only the foo directory and foo/bar.c (the foo directory must be
1414   explicitly included or it would be excluded by the "*")
1415 )
1416
1417 manpagesection(MERGE-FILE FILTER RULES)
1418
1419 You can merge whole files into your filter rules by specifying either a
1420 merge (.) or a dir-merge (:) filter rule (as introduced in the FILTER RULES
1421 section above).
1422
1423 There are two kinds of merged files -- single-instance ('.') and
1424 per-directory (':').  A single-instance merge file is read one time, and
1425 its rules are incorporated into the filter list in the place of the "."
1426 rule.  For per-directory merge files, rsync will scan every directory that
1427 it traverses for the named file, merging its contents when the file exists
1428 into the current list of inherited rules.  These per-directory rule files
1429 must be created on the sending side because it is the sending side that is
1430 being scanned for the available files to transfer.  These rule files may
1431 also need to be transferred to the receiving side if you want them to
1432 affect what files don't get deleted (see PER-DIRECTORY RULES AND DELETE
1433 below).
1434
1435 Some examples:
1436
1437 quote(
1438 tt(merge /etc/rsync/default.rules)nl()
1439 tt(. /etc/rsync/default.rules)nl()
1440 tt(dir-merge .per-dir-filter)nl()
1441 tt(dir-merge,n- .non-inherited-per-dir-excludes)nl()
1442 tt(:n- .non-inherited-per-dir-excludes)nl()
1443 )
1444
1445 The following modifiers are accepted after a merge or dir-merge rule:
1446
1447 itemize(
1448   it() A bf(-) specifies that the file should consist of only exclude
1449   patterns, with no other rule-parsing except for in-file comments.
1450   it() A bf(+) specifies that the file should consist of only include
1451   patterns, with no other rule-parsing except for in-file comments.
1452   it() A bf(C) is a way to specify that the file should be read in a
1453   CVS-compatible manner.  This turns on 'n', 'w', and '-', but also
1454   allows the list-clearing token (!) to be specified.  If no filename is
1455   provided, ".cvsignore" is assumed.
1456   it() A bf(e) will exclude the merge-file name from the transfer; e.g.
1457   "dir-merge,e .rules" is like "dir-merge .rules" and "- .rules".
1458   it() An bf(n) specifies that the rules are not inherited by subdirectories.
1459   it() A bf(w) specifies that the rules are word-split on whitespace instead
1460   of the normal line-splitting.  This also turns off comments.  Note: the
1461   space that separates the prefix from the rule is treated specially, so
1462   "- foo + bar" is parsed as two rules (assuming that prefix-parsing wasn't
1463   also disabled).
1464   it() You may also specify any of the modifiers for the "+" or "-" rules
1465   (below) in order  to have the rules that are read-in from the file
1466   default to having that modifier set.  For instance, "merge,-/ .excl" would
1467   treat the contents of .excl as absolute-path excludes,
1468   while "dir-merge,s .filt" and ":sC" would each make all their
1469   per-directory rules apply only on the server side.
1470 )
1471
1472 The following modifiers are accepted after a "+" or "-":
1473
1474 itemize(
1475   it() A "/" specifies that the include/exclude should be treated as an
1476   absolute path, relative to the root of the filesystem.  For example,
1477   "-/ /etc/passwd" would exclude the passwd file any time the transfer
1478   was sending files from the "/etc" directory.
1479   it() A "!" specifies that the include/exclude should take effect if
1480   the pattern fails to match.  For instance, "-! */" would exclude all
1481   non-directories.
1482   it() A bf(C) is used to indicate that all the global CVS-exclude rules
1483   should be inserted as excludes in place of the "-C".  No arg should
1484   follow.
1485   it() An bf(s) is used to indicate that the rule applies to the sending
1486   side.  When a rule affects the sending side, it prevents files from
1487   being transferred.  The default is for a rule to affect both sides
1488   unless bf(--delete-excluded) was specified, in which case default rules
1489   become sender-side only.  See also the hide (H) and show (S) rules,
1490   which are an alternate way to specify server-side includes/excludes.
1491   it() An bf(r) is used to indicate that the rule applies to the receiving
1492   side.  When a rule affects the receiving side, it prevents files from
1493   being deleted.  See the bf(s) modifier for more info.  See also the
1494   protect (P) and risk (R) rules, which are an alternate way to
1495   specify receiver-side includes/excludes.
1496 )
1497
1498 Per-directory rules are inherited in all subdirectories of the directory
1499 where the merge-file was found unless the 'n' modifier was used.  Each
1500 subdirectory's rules are prefixed to the inherited per-directory rules
1501 from its parents, which gives the newest rules a higher priority than the
1502 inherited rules.  The entire set of dir-merge rules are grouped together in
1503 the spot where the merge-file was specified, so it is possible to override
1504 dir-merge rules via a rule that got specified earlier in the list of global
1505 rules.  When the list-clearing rule ("!") is read from a per-directory
1506 file, it only clears the inherited rules for the current merge file.
1507
1508 Another way to prevent a single rule from a dir-merge file from being inherited is to
1509 anchor it with a leading slash.  Anchored rules in a per-directory
1510 merge-file are relative to the merge-file's directory, so a pattern "/foo"
1511 would only match the file "foo" in the directory where the dir-merge filter
1512 file was found.
1513
1514 Here's an example filter file which you'd specify via bf(--filter=". file":)
1515
1516 quote(
1517 tt(merge /home/user/.global-filter)nl()
1518 tt(- *.gz)nl()
1519 tt(dir-merge .rules)nl()
1520 tt(+ *.[ch])nl()
1521 tt(- *.o)nl()
1522 )
1523
1524 This will merge the contents of the /home/user/.global-filter file at the
1525 start of the list and also turns the ".rules" filename into a per-directory
1526 filter file.  All rules read-in prior to the start of the directory scan
1527 follow the global anchoring rules (i.e. a leading slash matches at the root
1528 of the transfer).
1529
1530 If a per-directory merge-file is specified with a path that is a parent
1531 directory of the first transfer directory, rsync will scan all the parent
1532 dirs from that starting point to the transfer directory for the indicated
1533 per-directory file.  For instance, here is a common filter (see bf(-F)):
1534
1535 quote(tt(--filter=': /.rsync-filter'))
1536
1537 That rule tells rsync to scan for the file .rsync-filter in all
1538 directories from the root down through the parent directory of the
1539 transfer prior to the start of the normal directory scan of the file in
1540 the directories that are sent as a part of the transfer.  (Note: for an
1541 rsync daemon, the root is always the same as the module's "path".)
1542
1543 Some examples of this pre-scanning for per-directory files:
1544
1545 quote(
1546 tt(rsync -avF /src/path/ /dest/dir)nl()
1547 tt(rsync -av --filter=': ../../.rsync-filter' /src/path/ /dest/dir)nl()
1548 tt(rsync -av --filter=': .rsync-filter' /src/path/ /dest/dir)nl()
1549 )
1550
1551 The first two commands above will look for ".rsync-filter" in "/" and
1552 "/src" before the normal scan begins looking for the file in "/src/path"
1553 and its subdirectories.  The last command avoids the parent-dir scan
1554 and only looks for the ".rsync-filter" files in each directory that is
1555 a part of the transfer.
1556
1557 If you want to include the contents of a ".cvsignore" in your patterns,
1558 you should use the rule ":C", which creates a dir-merge of the .cvsignore
1559 file, but parsed in a CVS-compatible manner.  You can
1560 use this to affect where the bf(--cvs-exclude) (bf(-C)) option's inclusion of the
1561 per-directory .cvsignore file gets placed into your rules by putting the
1562 ":C" wherever you like in your filter rules.  Without this, rsync would
1563 add the dir-merge rule for the .cvsignore file at the end of all your other
1564 rules (giving it a lower priority than your command-line rules).  For
1565 example:
1566
1567 quote(
1568 tt(cat <<EOT | rsync -avC --filter='. -' a/ b)nl()
1569 tt(+ foo.o)nl()
1570 tt(:C)nl()
1571 tt(- *.old)nl()
1572 tt(EOT)nl()
1573 tt(rsync -avC --include=foo.o -f :C --exclude='*.old' a/ b)nl()
1574 )
1575
1576 Both of the above rsync commands are identical.  Each one will merge all
1577 the per-directory .cvsignore rules in the middle of the list rather than
1578 at the end.  This allows their dir-specific rules to supersede the rules
1579 that follow the :C instead of being subservient to all your rules.  To
1580 affect the other CVS exclude rules (i.e. the default list of exclusions,
1581 the contents of $HOME/.cvsignore, and the value of $CVSIGNORE) you should
1582 omit the bf(-C) command-line option and instead insert a "-C" rule into
1583 your filter rules; e.g. "--filter=-C".
1584
1585 manpagesection(LIST-CLEARING FILTER RULE)
1586
1587 You can clear the current include/exclude list by using the "!" filter
1588 rule (as introduced in the FILTER RULES section above).  The "current"
1589 list is either the global list of rules (if the rule is encountered while
1590 parsing the filter options) or a set of per-directory rules (which are
1591 inherited in their own sub-list, so a subdirectory can use this to clear
1592 out the parent's rules).
1593
1594 manpagesection(ANCHORING INCLUDE/EXCLUDE PATTERNS)
1595
1596 As mentioned earlier, global include/exclude patterns are anchored at the
1597 "root of the transfer" (as opposed to per-directory patterns, which are
1598 anchored at the merge-file's directory).  If you think of the transfer as
1599 a subtree of names that are being sent from sender to receiver, the
1600 transfer-root is where the tree starts to be duplicated in the destination
1601 directory.  This root governs where patterns that start with a / match.
1602
1603 Because the matching is relative to the transfer-root, changing the
1604 trailing slash on a source path or changing your use of the bf(--relative)
1605 option affects the path you need to use in your matching (in addition to
1606 changing how much of the file tree is duplicated on the destination
1607 host).  The following examples demonstrate this.
1608
1609 Let's say that we want to match two source files, one with an absolute
1610 path of "/home/me/foo/bar", and one with a path of "/home/you/bar/baz".
1611 Here is how the various command choices differ for a 2-source transfer:
1612
1613 quote(
1614    Example cmd: rsync -a /home/me /home/you /dest nl()
1615    +/- pattern: /me/foo/bar nl()
1616    +/- pattern: /you/bar/baz nl()
1617    Target file: /dest/me/foo/bar nl()
1618    Target file: /dest/you/bar/baz nl()
1619 )
1620
1621 quote(
1622    Example cmd: rsync -a /home/me/ /home/you/ /dest nl()
1623    +/- pattern: /foo/bar               (note missing "me") nl()
1624    +/- pattern: /bar/baz               (note missing "you") nl()
1625    Target file: /dest/foo/bar nl()
1626    Target file: /dest/bar/baz nl()
1627 )
1628
1629 quote(
1630    Example cmd: rsync -a --relative /home/me/ /home/you /dest nl()
1631    +/- pattern: /home/me/foo/bar       (note full path) nl()
1632    +/- pattern: /home/you/bar/baz      (ditto) nl()
1633    Target file: /dest/home/me/foo/bar nl()
1634    Target file: /dest/home/you/bar/baz nl()
1635 )
1636
1637 quote(
1638    Example cmd: cd /home; rsync -a --relative me/foo you/ /dest nl()
1639    +/- pattern: /me/foo/bar      (starts at specified path) nl()
1640    +/- pattern: /you/bar/baz     (ditto) nl()
1641    Target file: /dest/me/foo/bar nl()
1642    Target file: /dest/you/bar/baz nl()
1643 )
1644
1645 The easiest way to see what name you should filter is to just
1646 look at the output when using bf(--verbose) and put a / in front of the name
1647 (use the bf(--dry-run) option if you're not yet ready to copy any files).
1648
1649 manpagesection(PER-DIRECTORY RULES AND DELETE)
1650
1651 Without a delete option, per-directory rules are only relevant on the
1652 sending side, so you can feel free to exclude the merge files themselves
1653 without affecting the transfer.  To make this easy, the 'e' modifier adds
1654 this exclude for you, as seen in these two equivalent commands:
1655
1656 quote(
1657 tt(rsync -av --filter=': .excl' --exclude=.excl host:src/dir /dest)nl()
1658 tt(rsync -av --filter=':e .excl' host:src/dir /dest)nl()
1659 )
1660
1661 However, if you want to do a delete on the receiving side AND you want some
1662 files to be excluded from being deleted, you'll need to be sure that the
1663 receiving side knows what files to exclude.  The easiest way is to include
1664 the per-directory merge files in the transfer and use bf(--delete-after),
1665 because this ensures that the receiving side gets all the same exclude
1666 rules as the sending side before it tries to delete anything:
1667
1668 quote(tt(rsync -avF --delete-after host:src/dir /dest))
1669
1670 However, if the merge files are not a part of the transfer, you'll need to
1671 either specify some global exclude rules (i.e. specified on the command
1672 line), or you'll need to maintain your own per-directory merge files on
1673 the receiving side.  An example of the first is this (assume that the
1674 remote .rules files exclude themselves):
1675
1676 verb(rsync -av --filter=': .rules' --filter='. /my/extra.rules'
1677    --delete host:src/dir /dest)
1678
1679 In the above example the extra.rules file can affect both sides of the
1680 transfer, but (on the sending side) the rules are subservient to the rules
1681 merged from the .rules files because they were specified after the
1682 per-directory merge rule.
1683
1684 In one final example, the remote side is excluding the .rsync-filter
1685 files from the transfer, but we want to use our own .rsync-filter files
1686 to control what gets deleted on the receiving side.  To do this we must
1687 specifically exclude the per-directory merge files (so that they don't get
1688 deleted) and then put rules into the local files to control what else
1689 should not get deleted.  Like one of these commands:
1690
1691 verb(    rsync -av --filter=':e /.rsync-filter' --delete \ 
1692         host:src/dir /dest
1693     rsync -avFF --delete host:src/dir /dest)
1694
1695 manpagesection(BATCH MODE)
1696
1697 Batch mode can be used to apply the same set of updates to many
1698 identical systems. Suppose one has a tree which is replicated on a
1699 number of hosts.  Now suppose some changes have been made to this
1700 source tree and those changes need to be propagated to the other
1701 hosts. In order to do this using batch mode, rsync is run with the
1702 write-batch option to apply the changes made to the source tree to one
1703 of the destination trees.  The write-batch option causes the rsync
1704 client to store in a "batch file" all the information needed to repeat
1705 this operation against other, identical destination trees.
1706
1707 To apply the recorded changes to another destination tree, run rsync
1708 with the read-batch option, specifying the name of the same batch
1709 file, and the destination tree.  Rsync updates the destination tree
1710 using the information stored in the batch file.
1711
1712 For convenience, one additional file is creating when the write-batch
1713 option is used.  This file's name is created by appending
1714 ".sh" to the batch filename.  The .sh file contains
1715 a command-line suitable for updating a destination tree using that
1716 batch file. It can be executed using a Bourne(-like) shell, optionally
1717 passing in an alternate destination tree pathname which is then used
1718 instead of the original path. This is useful when the destination tree
1719 path differs from the original destination tree path.
1720
1721 Generating the batch file once saves having to perform the file
1722 status, checksum, and data block generation more than once when
1723 updating multiple destination trees. Multicast transport protocols can
1724 be used to transfer the batch update files in parallel to many hosts
1725 at once, instead of sending the same data to every host individually.
1726
1727 Examples:
1728
1729 quote(
1730 tt($ rsync --write-batch=foo -a host:/source/dir/ /adest/dir/)nl()
1731 tt($ scp foo* remote:)nl()
1732 tt($ ssh remote ./foo.sh /bdest/dir/)nl()
1733 )
1734
1735 quote(
1736 tt($ rsync --write-batch=foo -a /source/dir/ /adest/dir/)nl()
1737 tt($ ssh remote rsync --read-batch=- -a /bdest/dir/ <foo)nl()
1738 )
1739
1740 In these examples, rsync is used to update /adest/dir/ from /source/dir/
1741 and the information to repeat this operation is stored in "foo" and
1742 "foo.sh".  The host "remote" is then updated with the batched data going
1743 into the directory /bdest/dir.  The differences between the two examples
1744 reveals some of the flexibility you have in how you deal with batches:
1745
1746 itemize(
1747   it() The first example shows that the initial copy doesn't have to be
1748   local -- you can push or pull data to/from a remote host using either the
1749   remote-shell syntax or rsync daemon syntax, as desired.
1750   it() The first example uses the created "foo.sh" file to get the right
1751   rsync options when running the read-batch command on the remote host.
1752   it() The second example reads the batch data via standard input so that
1753   the batch file doesn't need to be copied to the remote machine first.
1754   This example avoids the foo.sh script because it needed to use a modified
1755   bf(--read-batch) option, but you could edit the script file if you wished to
1756   make use of it (just be sure that no other option is trying to use
1757   standard input, such as the "bf(--exclude-from=-)" option).
1758 )
1759
1760 Caveats:
1761
1762 The read-batch option expects the destination tree that it is updating
1763 to be identical to the destination tree that was used to create the
1764 batch update fileset.  When a difference between the destination trees
1765 is encountered the update might be discarded with no error (if the file
1766 appears to be up-to-date already) or the file-update may be attempted
1767 and then, if the file fails to verify, the update discarded with an
1768 error.  This means that it should be safe to re-run a read-batch operation
1769 if the command got interrupted.  If you wish to force the batched-update to
1770 always be attempted regardless of the file's size and date, use the bf(-I)
1771 option (when reading the batch).
1772 If an error occurs, the destination tree will probably be in a
1773 partially updated state. In that case, rsync can
1774 be used in its regular (non-batch) mode of operation to fix up the
1775 destination tree.
1776
1777 The rsync version used on all destinations must be at least as new as the
1778 one used to generate the batch file.  Rsync will die with an error if the
1779 protocol version in the batch file is too new for the batch-reading rsync
1780 to handle.
1781
1782 The bf(--dry-run) (bf(-n)) option does not work in batch mode and yields a runtime
1783 error.
1784
1785 When reading a batch file, rsync will force the value of certain options
1786 to match the data in the batch file if you didn't set them to the same
1787 as the batch-writing command.  Other options can (and should) be changed.
1788 For instance bf(--write-batch) changes to bf(--read-batch),
1789 bf(--files-from) is dropped, and the
1790 bf(--filter)/bf(--include)/bf(--exclude) options are not needed unless
1791 one of the bf(--delete) options is specified.
1792
1793 The code that creates the BATCH.sh file transforms any filter/include/exclude
1794 options into a single list that is appended as a "here" document to the
1795 shell script file.  An advanced user can use this to modify the exclude
1796 list if a change in what gets deleted by bf(--delete) is desired.  A normal
1797 user can ignore this detail and just use the shell script as an easy way
1798 to run the appropriate bf(--read-batch) command for the batched data.
1799
1800 The original batch mode in rsync was based on "rsync+", but the latest
1801 version uses a new implementation.
1802
1803 manpagesection(SYMBOLIC LINKS)
1804
1805 Three basic behaviors are possible when rsync encounters a symbolic
1806 link in the source directory.
1807
1808 By default, symbolic links are not transferred at all.  A message
1809 "skipping non-regular" file is emitted for any symlinks that exist.
1810
1811 If bf(--links) is specified, then symlinks are recreated with the same
1812 target on the destination.  Note that bf(--archive) implies
1813 bf(--links).
1814
1815 If bf(--copy-links) is specified, then symlinks are "collapsed" by
1816 copying their referent, rather than the symlink.
1817
1818 rsync also distinguishes "safe" and "unsafe" symbolic links.  An
1819 example where this might be used is a web site mirror that wishes
1820 ensure the rsync module they copy does not include symbolic links to
1821 bf(/etc/passwd) in the public section of the site.  Using
1822 bf(--copy-unsafe-links) will cause any links to be copied as the file
1823 they point to on the destination.  Using bf(--safe-links) will cause
1824 unsafe links to be omitted altogether.
1825
1826 Symbolic links are considered unsafe if they are absolute symlinks
1827 (start with bf(/)), empty, or if they contain enough bf("..")
1828 components to ascend from the directory being copied.
1829
1830 manpagediagnostics()
1831
1832 rsync occasionally produces error messages that may seem a little
1833 cryptic. The one that seems to cause the most confusion is "protocol
1834 version mismatch -- is your shell clean?".
1835
1836 This message is usually caused by your startup scripts or remote shell
1837 facility producing unwanted garbage on the stream that rsync is using
1838 for its transport. The way to diagnose this problem is to run your
1839 remote shell like this:
1840
1841 quote(tt(ssh remotehost /bin/true > out.dat))
1842
1843 then look at out.dat. If everything is working correctly then out.dat
1844 should be a zero length file. If you are getting the above error from
1845 rsync then you will probably find that out.dat contains some text or
1846 data. Look at the contents and try to work out what is producing
1847 it. The most common cause is incorrectly configured shell startup
1848 scripts (such as .cshrc or .profile) that contain output statements
1849 for non-interactive logins.
1850
1851 If you are having trouble debugging filter patterns, then
1852 try specifying the bf(-vv) option.  At this level of verbosity rsync will
1853 show why each individual file is included or excluded.
1854
1855 manpagesection(EXIT VALUES)
1856
1857 startdit()
1858 dit(bf(0)) Success
1859 dit(bf(1)) Syntax or usage error
1860 dit(bf(2)) Protocol incompatibility
1861 dit(bf(3)) Errors selecting input/output files, dirs
1862 dit(bf(4)) Requested action not supported: an attempt
1863 was made to manipulate 64-bit files on a platform that cannot support
1864 them; or an option was specified that is supported by the client and
1865 not by the server.
1866 dit(bf(5)) Error starting client-server protocol
1867 dit(bf(10)) Error in socket I/O
1868 dit(bf(11)) Error in file I/O
1869 dit(bf(12)) Error in rsync protocol data stream
1870 dit(bf(13)) Errors with program diagnostics
1871 dit(bf(14)) Error in IPC code
1872 dit(bf(20)) Received SIGUSR1 or SIGINT
1873 dit(bf(21)) Some error returned by waitpid()
1874 dit(bf(22)) Error allocating core memory buffers
1875 dit(bf(23)) Partial transfer due to error
1876 dit(bf(24)) Partial transfer due to vanished source files
1877 dit(bf(30)) Timeout in data send/receive
1878 enddit()
1879
1880 manpagesection(ENVIRONMENT VARIABLES)
1881
1882 startdit()
1883 dit(bf(CVSIGNORE)) The CVSIGNORE environment variable supplements any
1884 ignore patterns in .cvsignore files. See the bf(--cvs-exclude) option for
1885 more details.
1886 dit(bf(RSYNC_RSH)) The RSYNC_RSH environment variable allows you to
1887 override the default shell used as the transport for rsync.  Command line
1888 options are permitted after the command name, just as in the bf(-e) option.
1889 dit(bf(RSYNC_PROXY)) The RSYNC_PROXY environment variable allows you to
1890 redirect your rsync client to use a web proxy when connecting to a
1891 rsync daemon. You should set RSYNC_PROXY to a hostname:port pair.
1892 dit(bf(RSYNC_PASSWORD)) Setting RSYNC_PASSWORD to the required
1893 password allows you to run authenticated rsync connections to an rsync
1894 daemon without user intervention. Note that this does not supply a
1895 password to a shell transport such as ssh.
1896 dit(bf(USER) or bf(LOGNAME)) The USER or LOGNAME environment variables
1897 are used to determine the default username sent to an rsync server.
1898 If neither is set, the username defaults to "nobody".
1899 dit(bf(HOME)) The HOME environment variable is used to find the user's
1900 default .cvsignore file.
1901 enddit()
1902
1903 manpagefiles()
1904
1905 /etc/rsyncd.conf or rsyncd.conf
1906
1907 manpageseealso()
1908
1909 rsyncd.conf(5)
1910
1911 manpagebugs()
1912
1913 times are transferred as unix time_t values
1914
1915 When transferring to FAT filesystems rsync may re-sync
1916 unmodified files.
1917 See the comments on the bf(--modify-window) option.
1918
1919 file permissions, devices, etc. are transferred as native numerical
1920 values
1921
1922 see also the comments on the bf(--delete) option
1923
1924 Please report bugs! See the website at
1925 url(http://rsync.samba.org/)(http://rsync.samba.org/)
1926
1927 manpagesection(CREDITS)
1928
1929 rsync is distributed under the GNU public license.  See the file
1930 COPYING for details.
1931
1932 A WEB site is available at
1933 url(http://rsync.samba.org/)(http://rsync.samba.org/).  The site
1934 includes an FAQ-O-Matic which may cover questions unanswered by this
1935 manual page.
1936
1937 The primary ftp site for rsync is
1938 url(ftp://rsync.samba.org/pub/rsync)(ftp://rsync.samba.org/pub/rsync).
1939
1940 We would be delighted to hear from you if you like this program.
1941
1942 This program uses the excellent zlib compression library written by
1943 Jean-loup Gailly and Mark Adler.
1944
1945 manpagesection(THANKS)
1946
1947 Thanks to Richard Brent, Brendan Mackay, Bill Waite, Stephen Rothwell
1948 and David Bell for helpful suggestions, patches and testing of rsync.
1949 I've probably missed some people, my apologies if I have.
1950
1951 Especial thanks also to: David Dykstra, Jos Backus, Sebastian Krahmer,
1952 Martin Pool, Wayne Davison, J.W. Schultz.
1953
1954 manpageauthor()
1955
1956 rsync was originally written by Andrew Tridgell and Paul Mackerras.
1957 Many people have later contributed to it.
1958
1959 Mailing lists for support and development are available at
1960 url(http://lists.samba.org)(lists.samba.org)