Ack! I had accidentally ifdefed out the kill from the generator to the
[rsync/rsync.git] / rsync.yo
1 mailto(rsync-bugs@samba.org)
2 manpage(rsync)(1)(26 Jan 2003)()()
3 manpagename(rsync)(faster, flexible replacement for rcp)
4 manpagesynopsis()
5
6 rsync [OPTION]... SRC [SRC]... [USER@]HOST:DEST
7
8 rsync [OPTION]... [USER@]HOST:SRC DEST
9
10 rsync [OPTION]... SRC [SRC]... DEST
11
12 rsync [OPTION]... [USER@]HOST::SRC [DEST]
13
14 rsync [OPTION]... SRC [SRC]... [USER@]HOST::DEST
15
16 rsync [OPTION]... rsync://[USER@]HOST[:PORT]/SRC [DEST]
17
18 rsync [OPTION]... SRC [SRC]... rsync://[USER@]HOST[:PORT]/DEST
19
20 manpagedescription()
21
22 rsync is a program that behaves in much the same way that rcp does,
23 but has many more options and uses the rsync remote-update protocol to
24 greatly speed up file transfers when the destination file already
25 exists.
26
27 The rsync remote-update protocol allows rsync to transfer just the
28 differences between two sets of files across the network link, using
29 an efficient checksum-search algorithm described in the technical
30 report that accompanies this package.
31
32 Some of the additional features of rsync are:
33
34 itemize(
35   it() support for copying links, devices, owners, groups and permissions
36   it() exclude and exclude-from options similar to GNU tar
37   it() a CVS exclude mode for ignoring the same files that CVS would ignore
38   it() can use any transparent remote shell, including rsh or ssh
39   it() does not require root privileges
40   it() pipelining of file transfers to minimize latency costs
41   it() support for anonymous or authenticated rsync servers (ideal for
42        mirroring)
43 )
44
45 manpagesection(GENERAL)
46
47 There are eight different ways of using rsync. They are:
48
49 itemize(
50         it() for copying local files. This is invoked when neither
51              source nor destination path contains a : separator
52
53         it() for copying from the local machine to a remote machine using
54         a remote shell program as the transport (such as rsh or
55         ssh). This is invoked when the destination path contains a
56         single : separator.
57
58         it() for copying from a remote machine to the local machine
59         using a remote shell program. This is invoked when the source
60         contains a : separator.
61
62         it() for copying from a remote rsync server to the local
63         machine. This is invoked when the source path contains a ::
64         separator or a rsync:// URL.
65
66         it() for copying from the local machine to a remote rsync
67         server. This is invoked when the destination path contains a ::
68         separator or a rsync:// URL.
69
70         it() for copying from a remote machine using a remote shell
71         program as the transport, using rsync server on the remote
72         machine.  This is invoked when the source path contains a ::
73         separator and the --rsh=COMMAND (aka "-e COMMAND") option is
74         also provided.
75
76         it() for copying from the local machine to a remote machine
77         using a remote shell program as the transport, using rsync
78         server on the remote machine.  This is invoked when the
79         destination path contains a :: separator and the
80         --rsh=COMMMAND option is also provided.
81
82         it() for listing files on a remote machine. This is done the
83         same way as rsync transfers except that you leave off the
84         local destination.  
85 )
86
87 Note that in all cases (other than listing) at least one of the source
88 and destination paths must be local.
89
90 manpagesection(SETUP)
91
92 See the file README for installation instructions.
93
94 Once installed, you can use rsync to any machine that you can access via
95 a remote shell (as well as some that you can access using the rsync
96 daemon-mode protocol).  For remote transfers, rsync typically uses rsh
97 for its communications, but it may have been configured to use a
98 different remote shell by default, such as ssh.
99
100 You can also specify any remote shell you like, either by using the -e
101 command line option, or by setting the RSYNC_RSH environment variable.
102
103 One common substitute is to use ssh, which offers a high degree of
104 security.
105
106 Note that rsync must be installed on both the source and destination
107 machines. 
108
109 manpagesection(USAGE)
110
111 You use rsync in the same way you use rcp. You must specify a source
112 and a destination, one of which may be remote.
113
114 Perhaps the best way to explain the syntax is some examples:
115
116 quote(rsync *.c foo:src/)
117
118 this would transfer all files matching the pattern *.c from the
119 current directory to the directory src on the machine foo. If any of
120 the files already exist on the remote system then the rsync
121 remote-update protocol is used to update the file by sending only the
122 differences. See the tech report for details.
123
124 quote(rsync -avz foo:src/bar /data/tmp)
125
126 this would recursively transfer all files from the directory src/bar on the
127 machine foo into the /data/tmp/bar directory on the local machine. The
128 files are transferred in "archive" mode, which ensures that symbolic
129 links, devices, attributes, permissions, ownerships etc are preserved
130 in the transfer.  Additionally, compression will be used to reduce the
131 size of data portions of the transfer.
132
133 quote(rsync -avz foo:src/bar/ /data/tmp)
134
135 a trailing slash on the source changes this behavior to transfer
136 all files from the directory src/bar on the machine foo into the
137 /data/tmp/.  A trailing / on a source name means "copy the
138 contents of this directory".  Without a trailing slash it means "copy
139 the directory". This difference becomes particularly important when
140 using the --delete option.
141
142 You can also use rsync in local-only mode, where both the source and
143 destination don't have a ':' in the name. In this case it behaves like
144 an improved copy command.
145
146 quote(rsync somehost.mydomain.com::)
147
148 this would list all the anonymous rsync modules available on the host
149 somehost.mydomain.com.  (See the following section for more details.)
150
151
152 manpagesection(CONNECTING TO AN RSYNC SERVER)
153
154 It is also possible to use rsync without a remote shell as the
155 transport. In this case you will connect to a remote rsync server
156 running on TCP port 873. 
157
158 You may establish the connection via a web proxy by setting the
159 environment variable RSYNC_PROXY to a hostname:port pair pointing to
160 your web proxy.  Note that your web proxy's configuration must allow
161 proxying to port 873.
162
163 Using rsync in this way is the same as using it with a remote shell except
164 that:
165
166 itemize(
167         it() you use a double colon :: instead of a single colon to
168         separate the hostname from the path or a rsync:// URL.
169
170         it() the remote server may print a message of the day when you
171         connect.
172
173         it() if you specify no path name on the remote server then the
174         list of accessible paths on the server will be shown.
175
176         it() if you specify no local destination then a listing of the
177         specified files on the remote server is provided.
178 )
179
180 Some paths on the remote server may require authentication. If so then
181 you will receive a password prompt when you connect. You can avoid the
182 password prompt by setting the environment variable RSYNC_PASSWORD to
183 the password you want to use or using the --password-file option. This
184 may be useful when scripting rsync.
185
186 WARNING: On some systems environment variables are visible to all
187 users. On those systems using --password-file is recommended.
188
189 manpagesection(CONNECTING TO AN RSYNC SERVER OVER A REMOTE SHELL PROGRAM)
190
191 It is sometimes useful to be able to set up file transfers using rsync
192 server capabilities on the remote machine, while still using rsh or
193 ssh for transport.  This is especially useful when you want to connect
194 to a remote machine via ssh (for encryption or to get through a
195 firewall), but you still want to have access to the rsync server
196 features (see RUNNING AN RSYNC SERVER OVER A REMOTE SHELL PROGRAM,
197 below).  
198
199 From the user's perspective, using rsync in this way is the same as
200 using it to connect to an rsync server, except that you must
201 explicitly set the remote shell program on the command line with
202 --rsh=COMMAND.  (Setting RSYNC_RSH in the environment will not turn on
203 this functionality.)
204
205 In order to distinguish between the remote-shell user and the rsync
206 server user, you can use '-l user' on your remote-shell command:
207
208 quote(rsync -av --rsh="ssh -l ssh-user" rsync-user@host::module[/path] local-path)
209
210 The "ssh-user" will be used at the ssh level; the "rsync-user" will be
211 used to check against the rsyncd.conf on the remote host.
212
213 manpagesection(RUNNING AN RSYNC SERVER)
214
215 An rsync server is configured using a config file.  Please see the 
216 rsyncd.conf(5) man page for more information.  By default the configuration
217 file is called /etc/rsyncd.conf, unless rsync is running over a remote
218 shell program and is not running as root; in that case, the default name
219 is rsyncd.conf in the current directory on the remote computer 
220 (typically $HOME).
221
222 manpagesection(RUNNING AN RSYNC SERVER OVER A REMOTE SHELL PROGRAM)
223
224 See the rsyncd.conf(5) man page for full information on the rsync
225 server configuration file.  
226
227 Several configuration options will not be available unless the remote
228 user is root (e.g. chroot, setuid/setgid, etc.).  There is no need to
229 configure inetd or the services map to include the rsync server port
230 if you run an rsync server only via a remote shell program.
231
232 To run an rsync server out of a single-use ssh key, use the
233 "command=em(COMMAND)" syntax in the remote user's
234 authorized_keys entry, where command would be
235
236 quote(rsync --server --daemon .)
237
238 NOTE: rsync's argument parsing expects the trailing ".", so make sure
239 that it's there.  If you want to use a rsyncd.conf(5)-style
240 configuration file other than the default, you can added a
241 --config option to the em(command):
242
243 quote(rsync --server --daemon --config=em(file) .)
244
245 manpagesection(EXAMPLES)
246
247 Here are some examples of how I use rsync.
248
249 To backup my wife's home directory, which consists of large MS Word
250 files and mail folders, I use a cron job that runs
251
252 quote(rsync -Cavz . arvidsjaur:backup)
253
254 each night over a PPP link to a duplicate directory on my machine
255 "arvidsjaur".
256
257 To synchronize my samba source trees I use the following Makefile
258 targets:
259
260 quote(      get:nl()
261        rsync -avuzb --exclude '*~' samba:samba/ .
262
263       put:nl()
264        rsync -Cavuzb . samba:samba/
265
266       sync: get put)
267
268 this allows me to sync with a CVS directory at the other end of the
269 link. I then do cvs operations on the remote machine, which saves a
270 lot of time as the remote cvs protocol isn't very efficient.
271
272 I mirror a directory between my "old" and "new" ftp sites with the
273 command
274
275 quote(rsync -az -e ssh --delete ~ftp/pub/samba/ nimbus:"~ftp/pub/tridge/samba")
276
277 this is launched from cron every few hours.
278
279 manpagesection(OPTIONS SUMMARY)
280
281 Here is a short summary of the options available in rsync. Please refer
282 to the detailed description below for a complete description.
283
284 verb(
285  -v, --verbose               increase verbosity
286  -q, --quiet                 decrease verbosity
287  -c, --checksum              always checksum
288  -a, --archive               archive mode, equivalent to -rlptgoD
289  -r, --recursive             recurse into directories
290  -R, --relative              use relative path names
291  -b, --backup                make backups (default ~ suffix)
292      --backup-dir            make backups into this directory
293      --suffix=SUFFIX         define backup suffix
294  -u, --update                update only (don't overwrite newer files)
295  -l, --links                 copy symlinks as symlinks
296  -L, --copy-links            copy the referent of symlinks
297      --copy-unsafe-links     copy links outside the source tree
298      --safe-links            ignore links outside the destination tree
299  -H, --hard-links            preserve hard links
300  -p, --perms                 preserve permissions
301  -o, --owner                 preserve owner (root only)
302  -g, --group                 preserve group
303  -D, --devices               preserve devices (root only)
304  -t, --times                 preserve times
305  -S, --sparse                handle sparse files efficiently
306  -n, --dry-run               show what would have been transferred
307  -W, --whole-file            copy whole files, no incremental checks
308      --no-whole-file         turn off --whole-file
309  -x, --one-file-system       don't cross filesystem boundaries
310  -B, --block-size=SIZE       checksum blocking size (default 700)
311  -e, --rsh=COMMAND           specify the remote shell to use
312      --rsync-path=PATH       specify path to rsync on the remote machine
313  -C, --cvs-exclude           auto ignore files in the same way CVS does
314      --existing              only update files that already exist
315      --ignore-existing       ignore files that already exist on the receiving side
316      --delete                delete files that don't exist on the sending side
317      --delete-excluded       also delete excluded files on the receiving side
318      --delete-after          delete after transferring, not before
319      --ignore-errors         delete even if there are IO errors
320      --max-delete=NUM        don't delete more than NUM files
321      --partial               keep partially transferred files
322      --force                 force deletion of directories even if not empty
323      --numeric-ids           don't map uid/gid values by user/group name
324      --timeout=TIME          set IO timeout in seconds
325  -I, --ignore-times          don't exclude files that match length and time
326      --size-only             only use file size when determining if a file should be transferred
327      --modify-window=NUM     Timestamp window (seconds) for file match (default=0)
328  -T  --temp-dir=DIR          create temporary files in directory DIR
329      --compare-dest=DIR      also compare destination files relative to DIR
330      --link-dest=DIR         create hardlinks to DIR for unchanged files
331  -P                          equivalent to --partial --progress
332  -z, --compress              compress file data
333      --exclude=PATTERN       exclude files matching PATTERN
334      --exclude-from=FILE     exclude patterns listed in FILE
335      --include=PATTERN       don't exclude files matching PATTERN
336      --include-from=FILE     don't exclude patterns listed in FILE
337      --version               print version number
338      --daemon                run as a rsync daemon
339      --no-detach             do not detach from the parent
340      --address=ADDRESS       bind to the specified address
341      --config=FILE           specify alternate rsyncd.conf file
342      --port=PORT             specify alternate rsyncd port number
343      --blocking-io           use blocking IO for the remote shell
344      --no-blocking-io        turn off --blocking-io
345      --stats                 give some file transfer stats
346      --progress              show progress during transfer
347      --log-format=FORMAT     log file transfers using specified format
348      --password-file=FILE    get password from FILE
349      --bwlimit=KBPS          limit I/O bandwidth, KBytes per second
350      --read-batch=PREFIX     read batch fileset starting with PREFIX
351      --write-batch=PREFIX    write batch fileset starting with PREFIX
352  -h, --help                  show this help screen
353
354
355 )
356
357 manpageoptions()
358
359 rsync uses the GNU long options package. Many of the command line
360 options have two variants, one short and one long.  These are shown
361 below, separated by commas. Some options only have a long variant.
362 The '=' for options that take a parameter is optional; whitespace
363 can be used instead.
364
365 startdit()
366 dit(bf(-h, --help)) Print a short help page describing the options
367 available in rsync
368
369 dit(bf(--version)) print the rsync version number and exit
370
371 dit(bf(-v, --verbose)) This option increases the amount of information you
372 are given during the transfer.  By default, rsync works silently. A
373 single -v will give you information about what files are being
374 transferred and a brief summary at the end. Two -v flags will give you
375 information on what files are being skipped and slightly more
376 information at the end. More than two -v flags should only be used if
377 you are debugging rsync.
378
379 dit(bf(-q, --quiet)) This option decreases the amount of information you
380 are given during the transfer, notably suppressing information messages
381 from the remote server. This flag is useful when invoking rsync from
382 cron.
383
384 dit(bf(-I, --ignore-times)) Normally rsync will skip any files that are
385 already the same length and have the same time-stamp. This option turns
386 off this behavior.
387
388 dit(bf(--size-only)) Normally rsync will skip any files that are
389 already the same length and have the same time-stamp. With the
390 --size-only option files will be skipped if they have the same size,
391 regardless of timestamp. This is useful when starting to use rsync
392 after using another mirroring system which may not preserve timestamps
393 exactly.
394
395 dit(bf(--modify-window)) When comparing two timestamps rsync treats
396 the timestamps as being equal if they are within the value of
397 modify_window. This is normally zero, but you may find it useful to
398 set this to a larger value in some situations. In particular, when
399 transferring to/from FAT filesystems which cannot represent times with
400 a 1 second resolution this option is useful.
401
402 dit(bf(-c, --checksum)) This forces the sender to checksum all files using
403 a 128-bit MD4 checksum before transfer. The checksum is then
404 explicitly checked on the receiver and any files of the same name
405 which already exist and have the same checksum and size on the
406 receiver are skipped.  This option can be quite slow.
407
408 dit(bf(-a, --archive)) This is equivalent to -rlptgoD. It is a quick
409 way of saying you want recursion and want to preserve almost
410 everything.  
411
412 Note however that bf(-a) bf(does not preserve hardlinks), because
413 finding multiply-linked files is expensive.  You must separately
414 specify bf(-H).
415
416 dit(bf(-r, --recursive)) This tells rsync to copy directories
417 recursively. If you don't specify this then rsync won't copy
418 directories at all.
419
420 dit(bf(-R, --relative)) Use relative paths. This means that the full path
421 names specified on the command line are sent to the server rather than
422 just the last parts of the filenames. This is particularly useful when
423 you want to send several different directories at the same time. For
424 example, if you used the command
425
426 verb(rsync foo/bar/foo.c remote:/tmp/)
427
428 then this would create a file called foo.c in /tmp/ on the remote
429 machine. If instead you used
430
431 verb(rsync -R foo/bar/foo.c remote:/tmp/)
432
433 then a file called /tmp/foo/bar/foo.c would be created on the remote
434 machine. The full path name is preserved.
435
436 dit(bf(-b, --backup)) With this option preexisting destination files are
437 renamed with a ~ extension as each file is transferred.  You can
438 control the backup suffix using the --suffix option.
439
440 dit(bf(--backup-dir=DIR)) In combination with the --backup option, this
441 tells rsync to store all backups in the specified directory. This is
442 very useful for incremental backups.  You can additionally
443 specify a backup suffix using the --suffix option
444 (otherwise the files backed up in the specified directory
445 will keep their original filenames).
446
447 dit(bf(--suffix=SUFFIX)) This option allows you to override the default
448 backup suffix used with the -b option. The default is a ~.
449 If --backup-dir and --suffix are both specified,
450 the SUFFIX is appended to the filename even in the backup directory.
451
452 dit(bf(-u, --update)) This forces rsync to skip any files for which the
453 destination file already exists and has a date later than the source
454 file.
455
456 dit(bf(-l, --links)) When symlinks are encountered, recreate the
457 symlink on the destination.
458
459 dit(bf(-L, --copy-links)) When symlinks are encountered, the file that
460 they point to is copied, rather than the symlink.
461
462 dit(bf(--copy-unsafe-links)) This tells rsync to copy the referent of
463 symbolic links that point outside the source tree.  Absolute symlinks
464 are also treated like ordinary files, and so are any symlinks in the
465 source path itself when --relative is used.
466
467 dit(bf(--safe-links)) This tells rsync to ignore any symbolic links
468 which point outside the destination tree. All absolute symlinks are
469 also ignored. Using this option in conjunction with --relative may
470 give unexpected results. 
471
472 dit(bf(-H, --hard-links)) This tells rsync to recreate hard  links  on
473 the  remote system  to  be the same as the local system. Without this
474 option hard links are treated like regular files.
475
476 Note that rsync can only detect hard links if both parts of the link
477 are in the list of files being sent.
478
479 This option can be quite slow, so only use it if you need it.
480
481 dit(bf(-W, --whole-file)) With this option the incremental rsync algorithm
482 is not used and the whole file is sent as-is instead.  The transfer may be
483 faster if this option is used when the bandwidth between the source and
484 target machines is higher than the bandwidth to disk (especially when the
485 "disk" is actually a networked file system).  This is the default when both
486 the source and target are on the local machine.
487
488 dit(bf(--no-whole-file)) Turn off --whole-file, for use when it is the
489 default.
490
491 dit(bf(-p, --perms)) This option causes rsync to update the remote
492 permissions to be the same as the local permissions.
493
494 dit(bf(-o, --owner)) This option causes rsync to set the owner of the
495 destination file to be the same as the source file.  On most systems,
496 only the super-user can set file ownership.  Note that if the remote system
497 is a daemon using chroot, the --numeric-ids option is implied because the
498 remote system cannot get access to the usernames from /etc/passwd.
499
500 dit(bf(-g, --group)) This option causes rsync to set the group of the
501 destination file to be the same as the source file.  If the receiving
502 program is not running as the super-user, only groups that the
503 receiver is a member of will be preserved (by group name, not group id
504 number).
505
506 dit(bf(-D, --devices)) This option causes rsync to transfer character and
507 block device information to the remote system to recreate these
508 devices. This option is only available to the super-user.
509
510 dit(bf(-t, --times)) This tells rsync to transfer modification times along
511 with the files and update them on the remote system.  Note that if this
512 option is not used, the optimization that excludes files that have not been
513 modified cannot be effective; in other words, a missing -t or -a will
514 cause the next transfer to behave as if it used -I, and all files will have
515 their checksums compared and show up in log messages even if they haven't
516 changed.
517
518 dit(bf(-n, --dry-run)) This tells rsync to not do any file transfers,
519 instead it will just report the actions it would have taken.
520
521 dit(bf(-S, --sparse)) Try to handle sparse files efficiently so they take
522 up less space on the destination.
523
524 NOTE: Don't use this option when the destination is a Solaris "tmpfs"
525 filesystem. It doesn't seem to handle seeks over null regions
526 correctly and ends up corrupting the files.
527
528 dit(bf(-x, --one-file-system)) This tells rsync not to cross filesystem
529 boundaries  when recursing.  This  is useful for transferring the
530 contents of only one filesystem.
531
532 dit(bf(--existing)) This tells rsync not to create any new files -
533 only update files that already exist on the destination.
534
535 dit(bf(--ignore-existing))
536 This tells rsync not to update files that already exist on 
537 the destination. 
538
539 dit(bf(--max-delete=NUM)) This tells rsync not to delete more than NUM
540 files or directories. This is useful when mirroring very large trees
541 to prevent disasters.
542
543 dit(bf(--delete)) This tells rsync to delete any files on the receiving
544 side that aren't on the sending side.   Files that are excluded from
545 transfer are excluded from being deleted unless you use --delete-excluded.
546
547 This option has no effect if directory recursion is not selected.
548
549 This option can be dangerous if used incorrectly!  It is a very good idea
550 to run first using the dry run option (-n) to see what files would be
551 deleted to make sure important files aren't listed.
552
553 If the sending side detects any IO errors then the deletion of any
554 files at the destination will be automatically disabled. This is to
555 prevent temporary filesystem failures (such as NFS errors) on the
556 sending side causing a massive deletion of files on the
557 destination.  You can override this with the --ignore-errors option.
558
559 dit(bf(--delete-excluded)) In addition to deleting the files on the
560 receiving side that are not on the sending side, this tells rsync to also
561 delete any files on the receiving side that are excluded (see --exclude).
562 Implies --delete.
563
564 dit(bf(--delete-after)) By default rsync does file deletions before
565 transferring files to try to ensure that there is sufficient space on
566 the receiving filesystem. If you want to delete after transferring
567 then use the --delete-after switch. Implies --delete.
568
569 dit(bf(--ignore-errors)) Tells --delete to go ahead and delete files
570 even when there are IO errors.
571
572 dit(bf(--force)) This options tells rsync to delete directories even if
573 they are not empty when they are to be replaced by non-directories.  This
574 is only relevant without --delete because deletions are now done depth-first.
575 Requires the --recursive option (which is implied by -a) to have any effect.
576
577 dit(bf(-B , --block-size=BLOCKSIZE)) This controls the block size used in
578 the rsync algorithm. See the technical report for details.
579
580 dit(bf(-e, --rsh=COMMAND)) This option allows you to choose an alternative
581 remote shell program to use for communication between the local and
582 remote copies of rsync. Typically, rsync is configured to use rsh by
583 default, but you may prefer to use ssh because of its high security.
584
585 If this option is used with bf([user@]host::module/path), then the
586 remote shell em(COMMMAND) will be used to run an rsync server on the
587 remote host, and all data will be transmitted through that remote
588 shell connection, rather than through a direct socket connection to a
589 running rsync server on the remote host.  See the section "CONNECTING
590 TO AN RSYNC SERVER OVER A REMOTE SHELL PROGRAM" above.
591
592 Command-line arguments are permitted in COMMAND provided that COMMAND is
593 presented to rsync as a single argument.  For example:
594
595 quote(-e "ssh -p 2234")
596
597 (Note that ssh users can alternately customize site-specific connect
598 options in their .ssh/config file.)
599
600 You can also choose the remote shell program using the RSYNC_RSH
601 environment variable, which accepts the same range of values as -e.
602
603 See also the --blocking-io option which is affected by this option.
604
605 dit(bf(--rsync-path=PATH)) Use this to specify the path to the copy of
606 rsync on the remote machine. Useful when it's not in your path. Note
607 that this is the full path to the binary, not just the directory that
608 the binary is in.
609
610 dit(bf(--exclude=PATTERN)) This option allows you to selectively exclude
611 certain files from the list of files to be transferred. This is most
612 useful in combination with a recursive transfer.
613
614 You may use as many --exclude options on the command line as you like
615 to build up the list of files to exclude.
616
617 See the section on exclude patterns for information on the syntax of 
618 this option.
619
620 dit(bf(--exclude-from=FILE)) This option is similar to the --exclude
621 option, but instead it adds all exclude patterns listed in the file
622 FILE to the exclude list.  Blank lines in FILE and lines starting with
623 ';' or '#' are ignored.
624 If em(FILE) is bf(-) the list will be read from standard input.
625
626
627 dit(bf(--include=PATTERN)) This option tells rsync to not exclude the
628 specified pattern of filenames. This is useful as it allows you to
629 build up quite complex exclude/include rules.
630
631 See the section of exclude patterns for information on the syntax of 
632 this option.
633
634 dit(bf(--include-from=FILE)) This specifies a list of include patterns
635 from a file.
636 If em(FILE) is bf(-) the list will be read from standard input.
637
638
639 dit(bf(-C, --cvs-exclude)) This is a useful shorthand for excluding a
640 broad range of files that you often don't want to transfer between
641 systems. It uses the same algorithm that CVS uses to determine if
642 a file should be ignored.
643
644 The exclude list is initialized to:
645
646 quote(RCS/ SCCS/ CVS/ .svn/ CVS.adm RCSLOG cvslog.* tags TAGS .make.state
647 .nse_depinfo *~ #* .#* ,* *.old *.bak *.BAK *.orig *.rej .del-*
648 *.a *.o *.obj *.so *.Z *.elc *.ln core)
649
650 then files listed in a $HOME/.cvsignore are added to the list and any
651 files listed in the CVSIGNORE environment variable (space delimited).
652
653 Finally, any file is ignored if it is in the same directory as a
654 .cvsignore file and matches one of the patterns listed therein.  See
655 the bf(cvs(1)) manual for more information.
656
657 dit(bf(--csum-length=LENGTH)) By default the primary checksum used in
658 rsync is a very strong 16 byte MD4 checksum. In most cases you will
659 find that a truncated version of this checksum is quite efficient, and
660 this will decrease the size of the checksum data sent over the link,
661 making things faster. 
662
663 You can choose the number of bytes in the truncated checksum using the
664 --csum-length option. Any value less than or equal to 16 is valid.
665
666 Note that if you use this option then you run the risk of ending up
667 with an incorrect target file. The risk with a value of 16 is
668 microscopic and can be safely ignored (the universe will probably end
669 before it fails) but with smaller values the risk is higher.
670
671 Current versions of rsync actually use an adaptive algorithm for the
672 checksum length by default, using a 16 byte file checksum to determine
673 if a 2nd pass is required with a longer block checksum. Only use this
674 option if you have read the source code and know what you are doing.
675
676 dit(bf(-T, --temp-dir=DIR)) This option instructs rsync to use DIR as a
677 scratch directory when creating temporary copies of the files
678 transferred on the receiving side.  The default behavior is to create
679 the temporary files in the receiving directory.
680
681 dit(bf(--compare-dest=DIR)) This option instructs rsync to use DIR on
682 the destination machine as an additional directory to compare destination
683 files against when doing transfers if the files are missing in the
684 destination directory.  This is useful for doing transfers to a new
685 destination while leaving existing files intact, and then doing a
686 flash-cutover when all files have been successfully transferred (for
687 example by moving directories around and removing the old directory,
688 although this skips files that haven't changed; see also --link-dest).
689 This option increases the usefulness of --partial because partially
690 transferred files will remain in the new temporary destination until they
691 have a chance to be completed.  If DIR is a relative path, it is relative
692 to the destination directory.
693
694 dit(bf(--link-dest=DIR)) This option behaves like bf(--compare-dest) but
695 also will create hard links from em(DIR) to the destination directory for
696 unchanged files.  Files with changed ownership or permissions will not be
697 linked.
698
699 dit(bf(-z, --compress)) With this option, rsync compresses any data from
700 the files that it sends to the destination machine.  This
701 option is useful on slow links.  The compression method used is the
702 same method that gzip uses.
703
704 Note this this option typically achieves better compression ratios
705 that can be achieved by using a compressing remote shell, or a
706 compressing transport, as it takes advantage of the implicit
707 information sent for matching data blocks.
708
709 dit(bf(--numeric-ids)) With this option rsync will transfer numeric group
710 and user ids rather than using user and group names and mapping them
711 at both ends.
712
713 By default rsync will use the user name and group name to determine
714 what ownership to give files. The special uid 0 and the special group
715 0 are never mapped via user/group names even if the --numeric-ids
716 option is not specified.
717
718 If the source system is a daemon using chroot, or if a user or group
719 name does not exist on the destination system, then the numeric id
720 from the source system is used instead.
721
722 dit(bf(--timeout=TIMEOUT)) This option allows you to set a maximum IO
723 timeout in seconds. If no data is transferred for the specified time
724 then rsync will exit. The default is 0, which means no timeout.
725
726 dit(bf(--daemon)) This tells rsync that it is to run as a daemon.  The
727 daemon may be accessed using the bf(host::module) or
728 bf(rsync://host/module/) syntax.
729
730 If standard input is a socket then rsync will assume that it is being
731 run via inetd, otherwise it will detach from the current terminal and
732 become a background daemon.  The daemon will read the config file
733 (rsyncd.conf) on each connect made by a client and respond to
734 requests accordingly.  See the rsyncd.conf(5) man page for more
735 details.
736
737 dit(bf(--no-detach)) When running as a daemon, this option instructs
738 rsync to not detach itself and become a background process.  This
739 option is required when running as a service on Cygwin, and may also
740 be useful when rsync is supervised by a program such as
741 bf(daemontools) or AIX's bf(System Resource Controller).
742 bf(--no-detach) is also recommended when rsync is run under a
743 debugger.  This option has no effect if rsync is run from inetd or
744 sshd.
745
746 dit(bf(--address)) By default rsync will bind to the wildcard address
747 when run as a daemon with the --daemon option or when connecting to a
748 rsync server. The --address option allows you to specify a specific IP
749 address (or hostname) to bind to. This makes virtual hosting possible
750 in conjunction with the --config option.
751
752 dit(bf(--config=FILE)) This specifies an alternate config file than
753 the default.  This is only relevant when --daemon is specified. 
754 The default is /etc/rsyncd.conf unless the daemon is running over
755 a remote shell program and the remote user is not root; in that case
756 the default is rsyncd.conf in the current directory (typically $HOME).
757
758 dit(bf(--port=PORT)) This specifies an alternate TCP port number to use
759 rather than the default port 873.
760
761 dit(bf(--blocking-io)) This tells rsync to use blocking IO when launching
762 a remote shell transport.  If -e or --rsh are not specified or are set to
763 the default "rsh", this defaults to blocking IO, otherwise it defaults to
764 non-blocking IO.  You may find the --blocking-io option is needed for some
765 remote shells that can't handle non-blocking IO.  (Note that ssh prefers
766 non-blocking IO.)
767
768 dit(bf(--no-blocking-io)) Turn off --blocking-io, for use when it is the
769 default.
770
771 dit(bf(--log-format=FORMAT)) This allows you to specify exactly what the
772 rsync client logs to stdout on a per-file basis. The log format is
773 specified using the same format conventions as the log format option in
774 rsyncd.conf.
775
776 dit(bf(--stats)) This tells rsync to print a verbose set of statistics
777 on the file transfer, allowing you to tell how effective the rsync
778 algorithm is for your data.
779
780 dit(bf(--partial)) By default, rsync will delete any partially
781 transferred file if the transfer is interrupted. In some circumstances
782 it is more desirable to keep partially transferred files. Using the
783 --partial option tells rsync to keep the partial file which should
784 make a subsequent transfer of the rest of the file much faster.
785
786 dit(bf(--progress)) This option tells rsync to print information
787 showing the progress of the transfer. This gives a bored user
788 something to watch.
789
790 This option is normally combined with -v. Using this option without
791 the -v option will produce weird results on your display.
792
793 dit(bf(-P)) The -P option is equivalent to --partial --progress. I
794 found myself typing that combination quite often so I created an
795 option to make it easier.
796
797 dit(bf(--password-file)) This option allows you to provide a password
798 in a file for accessing a remote rsync server. Note that this option
799 is only useful when accessing a rsync server using the built in
800 transport, not when using a remote shell as the transport. The file
801 must not be world readable. It should contain just the password as a
802 single line.
803
804 dit(bf(--bwlimit=KBPS)) This option allows you to specify a maximum
805 transfer rate in kilobytes per second. This option is most effective when
806 using rsync with large files (several megabytes and up). Due to the nature
807 of rsync transfers, blocks of data are sent, then if rsync determines the
808 transfer was too fast, it will wait before sending the next data block. The
809 result is an average transfer rate equalling the specified limit. A value
810 of zero specifies no limit.
811
812 dit(bf(--write-batch=PREFIX)) Generate a set of files that can be
813 transferred as a batch update. Each filename in the set starts with
814 PREFIX. See the "BATCH MODE" section for details.
815
816 dit(bf(--read-batch=PREFIX)) Apply a previously generated change batch,
817 using the fileset whose filenames start with PREFIX. See the "BATCH
818 MODE" section for details.
819
820 enddit()
821
822 manpagesection(EXCLUDE PATTERNS)
823
824 The exclude and include patterns specified to rsync allow for flexible
825 selection of which files to transfer and which files to skip.
826
827 rsync builds an ordered list of include/exclude options as specified on
828 the command line. When a filename is encountered, rsync checks the
829 name against each exclude/include pattern in turn. The first matching
830 pattern is acted on. If it is an exclude pattern, then that file is
831 skipped. If it is an include pattern then that filename is not
832 skipped. If no matching include/exclude pattern is found then the
833 filename is not skipped.
834
835 Note that when used with -r (which is implied by -a), every subcomponent of
836 every path is visited from top down, so include/exclude patterns get
837 applied recursively to each subcomponent.
838
839 Note also that the --include and --exclude options take one pattern
840 each. To add multiple patterns use the --include-from and
841 --exclude-from options or multiple --include and --exclude options. 
842
843 The patterns can take several forms. The rules are:
844
845 itemize(
846   it() if the pattern starts with a / then it is matched against the
847   start of the filename, otherwise it is matched against the end of
848   the filename.  Thus "/foo" would match a file called "foo" at the base of
849   the tree.  On the other hand, "foo" would match any file called "foo"
850   anywhere in the tree because the algorithm is applied recursively from
851   top down; it behaves as if each path component gets a turn at being the
852   end of the file name.
853
854   it() if the pattern ends with a / then it will only match a
855   directory, not a file, link or device.
856
857   it() if the pattern contains a wildcard character from the set
858   *?[ then expression matching is applied using the shell filename
859   matching rules. Otherwise a simple string match is used.
860
861   it() if the pattern includes a double asterisk "**" then all wildcards in
862   the pattern will match slashes, otherwise they will stop at slashes.
863
864   it() if the pattern contains a / (not counting a trailing /) then it
865   is matched against the full filename, including any leading
866   directory. If the pattern doesn't contain a / then it is matched
867   only against the final component of the filename.  Again, remember
868   that the algorithm is applied recursively so "full filename" can 
869   actually be any portion of a path.
870
871   it() if the pattern starts with "+ " (a plus followed by a space)
872   then it is always considered an include pattern, even if specified as
873   part of an exclude option. The "+ " part is discarded before matching.
874
875   it() if the pattern starts with "- " (a minus followed by a space)
876   then it is always considered an exclude pattern, even if specified as
877   part of an include option. The "- " part is discarded before matching.
878
879   it() if the pattern is a single exclamation mark ! then the current
880   include/exclude list is reset, removing all previously defined patterns.
881 )
882
883 The +/- rules are most useful in exclude lists, allowing you to have a
884 single exclude list that contains both include and exclude options.
885
886 If you end an exclude list with --exclude '*', note that since the
887 algorithm is applied recursively that unless you explicitly include
888 parent directories of files you want to include then the algorithm
889 will stop at the parent directories and never see the files below
890 them.  To include all directories, use --include '*/' before the
891 --exclude '*'.
892
893 Here are some exclude/include examples:
894
895 itemize(
896   it() --exclude "*.o" would exclude all filenames matching *.o
897   it() --exclude "/foo" would exclude a file in the base directory called foo
898   it() --exclude "foo/" would exclude any directory called foo
899   it() --exclude "/foo/*/bar" would exclude any file called bar two
900   levels below a base directory called foo
901   it() --exclude "/foo/**/bar" would exclude any file called bar two
902   or more levels below a base directory called foo
903   it() --include "*/" --include "*.c" --exclude "*" would include all 
904   directories and C source files
905   it() --include "foo/" --include "foo/bar.c" --exclude "*" would include
906   only foo/bar.c (the foo/ directory must be explicitly included or
907   it would be excluded by the "*")
908 )
909
910 manpagesection(BATCH MODE)
911
912 bf(Note:) Batch mode should be considered experimental in this version
913 of rsync. The interface or behaviour may change before it stabilizes.
914
915 Batch mode can be used to apply the same set of updates to many
916 identical systems. Suppose one has a tree which is replicated on a
917 number of hosts.  Now suppose some changes have been made to this
918 source tree and those changes need to be propagated to the other
919 hosts. In order to do this using batch mode, rsync is run with the
920 write-batch option to apply the changes made to the source tree to one
921 of the destination trees.  The write-batch option causes the rsync
922 client to store the information needed to repeat this operation against
923 other destination trees in a batch update fileset (see below).  The
924 filename of each file in the fileset starts with a prefix specified by
925 the user as an argument to the write-batch option.  This fileset is
926 then copied to each remote host, where rsync is run with the read-batch
927 option, again specifying the same prefix, and the destination tree.
928 Rsync updates the destination tree using the information stored in the
929 batch update fileset.
930
931 The fileset consists of 4 files:
932
933 itemize(
934 it() bf(<prefix>.rsync_argvs) command-line arguments
935 it() bf(<prefix>.rsync_flist) rsync internal file metadata
936 it() bf(<prefix>.rsync_csums) rsync checksums
937 it() bf(<prefix>.rsync_delta) data blocks for file update & change
938 )
939
940 The .rsync_argvs file contains a command-line suitable for updating a
941 destination tree using that batch update fileset. It can be executed
942 using a Bourne(-like) shell, optionally passing in an alternate
943 destination tree pathname which is then used instead of the original
944 path. This is useful when the destination tree path differs from the
945 original destination tree path.
946
947 Generating the batch update fileset once saves having to perform the
948 file status, checksum and data block generation more than once when
949 updating multiple destination trees. Multicast transport protocols can
950 be used to transfer the batch update files in parallel to many hosts at
951 once, instead of sending the same data to every host individually.
952
953 Example:
954
955 verb(
956 $ rsync --write_batch=pfx -a /source/dir/ /adest/dir/
957 $ rcp pfx.rsync_* remote:
958 $ rsh remote rsync --read_batch=pfx -a /bdest/dir/
959 # or alternatively
960 $ rsh remote ./pfx.rsync_argvs /bdest/dir/
961 )
962
963 In this example, rsync is used to update /adest/dir/ with /source/dir/
964 and the information to repeat this operation is stored in the files
965 pfx.rsync_*. These files are then copied to the machine named "remote".
966 Rsync is then invoked on "remote" to update /bdest/dir/ the same way as
967 /adest/dir/. The last line shows the rsync_argvs file being used to
968 invoke rsync.
969
970 Caveats:
971
972 The read-batch option expects the destination tree it is meant to update
973 to be identical to the destination tree that was used to create the
974 batch update fileset.  When a difference between the destination trees
975 is encountered the update will fail at that point, leaving the
976 destination tree in a partially updated state. In that case, rsync can
977 be used in its regular (non-batch) mode of operation to fix up the
978 destination tree.
979
980 The rsync version used on all destinations should be identical to the
981 one used on the original destination.
982
983 The -z/--compress option does not work in batch mode and yields a usage
984 error. A separate compression tool can be used instead to reduce the
985 size of the batch update files for transport to the destination.
986
987 The -n/--dryrun option does not work in batch mode and yields a runtime
988 error.
989
990 See bf(http://www.ils.unc.edu/i2dsi/unc_rsync+.html) for papers and technical
991 reports.
992
993 manpagesection(SYMBOLIC LINKS)
994
995 Three basic behaviours are possible when rsync encounters a symbolic
996 link in the source directory.
997
998 By default, symbolic links are not transferred at all.  A message
999 "skipping non-regular" file is emitted for any symlinks that exist.
1000
1001 If bf(--links) is specified, then symlinks are recreated with the same
1002 target on the destination.  Note that bf(--archive) implies
1003 bf(--links).
1004
1005 If bf(--copy-links) is specified, then symlinks are "collapsed" by
1006 copying their referent, rather than the symlink.
1007
1008 rsync also distinguishes "safe" and "unsafe" symbolic links.  An
1009 example where this might be used is a web site mirror that wishes
1010 ensure the rsync module they copy does not include symbolic links to
1011 bf(/etc/passwd) in the public section of the site.  Using
1012 bf(--copy-unsafe-links) will cause any links to be copied as the file
1013 they point to on the destination.  Using bf(--safe-links) will cause
1014 unsafe links to be ommitted altogether.
1015
1016 Symbolic links are considered unsafe if they are absolute symlinks
1017 (start with bf(/)), empty, or if they contain enough bf("..")
1018 components to ascend from the directory being copied.
1019
1020 manpagesection(DIAGNOSTICS)
1021
1022 rsync occasionally produces error messages that may seem a little
1023 cryptic. The one that seems to cause the most confusion is "protocol
1024 version mismatch - is your shell clean?".
1025
1026 This message is usually caused by your startup scripts or remote shell
1027 facility producing unwanted garbage on the stream that rsync is using
1028 for its transport. The way to diagnose this problem is to run your
1029 remote shell like this:
1030
1031 verb(
1032    rsh remotehost /bin/true > out.dat
1033 )
1034        
1035 then look at out.dat. If everything is working correctly then out.dat
1036 should be a zero length file. If you are getting the above error from
1037 rsync then you will probably find that out.dat contains some text or
1038 data. Look at the contents and try to work out what is producing
1039 it. The most common cause is incorrectly configured shell startup
1040 scripts (such as .cshrc or .profile) that contain output statements
1041 for non-interactive logins.
1042
1043 If you are having trouble debugging include and exclude patterns, then
1044 try specifying the -vv option.  At this level of verbosity rsync will
1045 show why each individual file is included or excluded.
1046
1047 manpagesection(EXIT VALUES)
1048
1049 startdit()
1050 dit(bf(RERR_SYNTAX     1))       Syntax or usage error 
1051 dit(bf(RERR_PROTOCOL   2))       Protocol incompatibility 
1052 dit(bf(RERR_FILESELECT 3))       Errors selecting input/output files, dirs
1053
1054 dit(bf(RERR_UNSUPPORTED 4)) Requested action not supported: an attempt
1055 was made to manipulate 64-bit files on a platform that cannot support
1056 them; or an option was speciifed that is supported by the client and
1057 not by the server.
1058
1059 dit(bf(RERR_SOCKETIO   10))      Error in socket IO 
1060 dit(bf(RERR_FILEIO     11))      Error in file IO 
1061 dit(bf(RERR_STREAMIO   12))      Error in rsync protocol data stream 
1062 dit(bf(RERR_MESSAGEIO  13))      Errors with program diagnostics 
1063 dit(bf(RERR_IPC        14))      Error in IPC code 
1064 dit(bf(RERR_SIGNAL     20))      Received SIGUSR1 or SIGINT 
1065 dit(bf(RERR_WAITCHILD  21))      Some error returned by waitpid() 
1066 dit(bf(RERR_MALLOC     22))      Error allocating core memory buffers 
1067 dit(bf(RERR_TIMEOUT    30))      Timeout in data send/receive 
1068 enddit()
1069
1070 manpagesection(ENVIRONMENT VARIABLES)
1071
1072 startdit()
1073
1074 dit(bf(CVSIGNORE)) The CVSIGNORE environment variable supplements any
1075 ignore patterns in .cvsignore files. See the --cvs-exclude option for
1076 more details.
1077
1078 dit(bf(RSYNC_RSH)) The RSYNC_RSH environment variable allows you to
1079 override the default shell used as the transport for rsync.  Command line
1080 options are permitted after the command name, just as in the -e option.
1081
1082 dit(bf(RSYNC_PROXY)) The RSYNC_PROXY environment variable allows you to
1083 redirect your rsync client to use a web proxy when connecting to a
1084 rsync daemon. You should set RSYNC_PROXY to a hostname:port pair.
1085
1086 dit(bf(RSYNC_PASSWORD)) Setting RSYNC_PASSWORD to the required
1087 password allows you to run authenticated rsync connections to a rsync
1088 daemon without user intervention. Note that this does not supply a
1089 password to a shell transport such as ssh.
1090
1091 dit(bf(USER) or bf(LOGNAME)) The USER or LOGNAME environment variables
1092 are used to determine the default username sent to a rsync server.
1093
1094 dit(bf(HOME)) The HOME environment variable is used to find the user's
1095 default .cvsignore file.
1096
1097 enddit()
1098
1099 manpagefiles()
1100
1101 /etc/rsyncd.conf or rsyncd.conf
1102
1103 manpageseealso()
1104
1105 rsyncd.conf(5)
1106
1107 manpagediagnostics()
1108
1109 manpagebugs()
1110
1111 times are transferred as unix time_t values
1112
1113 file permissions, devices etc are transferred as native numerical
1114 values
1115
1116 see also the comments on the --delete option
1117
1118 Please report bugs! The rsync bug tracking system is online at
1119 url(http://rsync.samba.org/rsync/)(http://rsync.samba.org/rsync/)
1120
1121 manpagesection(VERSION)
1122 This man page is current for version 2.0 of rsync
1123
1124 manpagesection(CREDITS)
1125
1126 rsync is distributed under the GNU public license.  See the file
1127 COPYING for details.
1128
1129 A WEB site is available at
1130 url(http://rsync.samba.org/)(http://rsync.samba.org/).  The site
1131 includes an FAQ-O-Matic which may cover questions unanswered by this
1132 manual page.
1133
1134 The primary ftp site for rsync is
1135 url(ftp://rsync.samba.org/pub/rsync)(ftp://rsync.samba.org/pub/rsync).
1136
1137 We would be delighted to hear from you if you like this program.
1138
1139 This program uses the excellent zlib compression library written by
1140 Jean-loup Gailly and Mark Adler.
1141
1142 manpagesection(THANKS)
1143
1144 Thanks to Richard Brent, Brendan Mackay, Bill Waite, Stephen Rothwell
1145 and David Bell for helpful suggestions, patches and testing of rsync.
1146 I've probably missed some people, my apologies if I have.
1147
1148 Especial thanks also to: David Dykstra, Jos Backus, Sebastian Krahmer.
1149
1150
1151 manpageauthor()
1152
1153 rsync was written by Andrew Tridgell <tridge@samba.org> and Paul
1154 Mackerras.
1155
1156 rsync is now maintained by Martin Pool <mbp@samba.org>.  
1157
1158 Mailing lists for support and development are available at
1159 url(http://lists.samba.org)(lists.samba.org) 
1160
1161 If you suspect you have found a security vulnerability in rsync,
1162 please send it directly to Martin Pool and Andrew Tridgell.  For other
1163 enquiries, please use the mailing list.