Removing --csum-length option documentation since there is
[rsync/rsync.git] / rsync.yo
1 mailto(rsync-bugs@samba.org)
2 manpage(rsync)(1)(26 Jan 2003)()()
3 manpagename(rsync)(faster, flexible replacement for rcp)
4 manpagesynopsis()
5
6 rsync [OPTION]... SRC [SRC]... [USER@]HOST:DEST
7
8 rsync [OPTION]... [USER@]HOST:SRC DEST
9
10 rsync [OPTION]... SRC [SRC]... DEST
11
12 rsync [OPTION]... [USER@]HOST::SRC [DEST]
13
14 rsync [OPTION]... SRC [SRC]... [USER@]HOST::DEST
15
16 rsync [OPTION]... rsync://[USER@]HOST[:PORT]/SRC [DEST]
17
18 rsync [OPTION]... SRC [SRC]... rsync://[USER@]HOST[:PORT]/DEST
19
20 manpagedescription()
21
22 rsync is a program that behaves in much the same way that rcp does,
23 but has many more options and uses the rsync remote-update protocol to
24 greatly speed up file transfers when the destination file already
25 exists.
26
27 The rsync remote-update protocol allows rsync to transfer just the
28 differences between two sets of files across the network connection, using
29 an efficient checksum-search algorithm described in the technical
30 report that accompanies this package.
31
32 Some of the additional features of rsync are:
33
34 itemize(
35   it() support for copying links, devices, owners, groups and permissions
36   it() exclude and exclude-from options similar to GNU tar
37   it() a CVS exclude mode for ignoring the same files that CVS would ignore
38   it() can use any transparent remote shell, including rsh or ssh
39   it() does not require root privileges
40   it() pipelining of file transfers to minimize latency costs
41   it() support for anonymous or authenticated rsync servers (ideal for
42        mirroring)
43 )
44
45 manpagesection(GENERAL)
46
47 There are eight different ways of using rsync. They are:
48
49 itemize(
50         it() for copying local files. This is invoked when neither
51              source nor destination path contains a : separator
52
53         it() for copying from the local machine to a remote machine using
54         a remote shell program as the transport (such as rsh or
55         ssh). This is invoked when the destination path contains a
56         single : separator.
57
58         it() for copying from a remote machine to the local machine
59         using a remote shell program. This is invoked when the source
60         contains a : separator.
61
62         it() for copying from a remote rsync server to the local
63         machine. This is invoked when the source path contains a ::
64         separator or a rsync:// URL.
65
66         it() for copying from the local machine to a remote rsync
67         server. This is invoked when the destination path contains a ::
68         separator or a rsync:// URL.
69
70         it() for copying from a remote machine using a remote shell
71         program as the transport, using rsync server on the remote
72         machine.  This is invoked when the source path contains a ::
73         separator and the --rsh=COMMAND (aka "-e COMMAND") option is
74         also provided.
75
76         it() for copying from the local machine to a remote machine
77         using a remote shell program as the transport, using rsync
78         server on the remote machine.  This is invoked when the
79         destination path contains a :: separator and the
80         --rsh=COMMMAND option is also provided.
81
82         it() for listing files on a remote machine. This is done the
83         same way as rsync transfers except that you leave off the
84         local destination.  
85 )
86
87 Note that in all cases (other than listing) at least one of the source
88 and destination paths must be local.
89
90 manpagesection(SETUP)
91
92 See the file README for installation instructions.
93
94 Once installed, you can use rsync to any machine that you can access via
95 a remote shell (as well as some that you can access using the rsync
96 daemon-mode protocol).  For remote transfers, rsync typically uses rsh
97 for its communications, but it may have been configured to use a
98 different remote shell by default, such as ssh.
99
100 You can also specify any remote shell you like, either by using the -e
101 command line option, or by setting the RSYNC_RSH environment variable.
102
103 One common substitute is to use ssh, which offers a high degree of
104 security.
105
106 Note that rsync must be installed on both the source and destination
107 machines. 
108
109 manpagesection(USAGE)
110
111 You use rsync in the same way you use rcp. You must specify a source
112 and a destination, one of which may be remote.
113
114 Perhaps the best way to explain the syntax is some examples:
115
116 quote(rsync *.c foo:src/)
117
118 this would transfer all files matching the pattern *.c from the
119 current directory to the directory src on the machine foo. If any of
120 the files already exist on the remote system then the rsync
121 remote-update protocol is used to update the file by sending only the
122 differences. See the tech report for details.
123
124 quote(rsync -avz foo:src/bar /data/tmp)
125
126 this would recursively transfer all files from the directory src/bar on the
127 machine foo into the /data/tmp/bar directory on the local machine. The
128 files are transferred in "archive" mode, which ensures that symbolic
129 links, devices, attributes, permissions, ownerships etc are preserved
130 in the transfer.  Additionally, compression will be used to reduce the
131 size of data portions of the transfer.
132
133 quote(rsync -avz foo:src/bar/ /data/tmp)
134
135 a trailing slash on the source changes this behavior to transfer
136 all files from the directory src/bar on the machine foo into the
137 /data/tmp/.  A trailing / on a source name means "copy the
138 contents of this directory".  Without a trailing slash it means "copy
139 the directory". This difference becomes particularly important when
140 using the --delete option.
141
142 You can also use rsync in local-only mode, where both the source and
143 destination don't have a ':' in the name. In this case it behaves like
144 an improved copy command.
145
146 quote(rsync somehost.mydomain.com::)
147
148 this would list all the anonymous rsync modules available on the host
149 somehost.mydomain.com.  (See the following section for more details.)
150
151
152 manpagesection(CONNECTING TO AN RSYNC SERVER)
153
154 It is also possible to use rsync without a remote shell as the
155 transport. In this case you will connect to a remote rsync server
156 running on TCP port 873. 
157
158 You may establish the connection via a web proxy by setting the
159 environment variable RSYNC_PROXY to a hostname:port pair pointing to
160 your web proxy.  Note that your web proxy's configuration must allow
161 proxying to port 873.
162
163 Using rsync in this way is the same as using it with a remote shell except
164 that:
165
166 itemize(
167         it() you use a double colon :: instead of a single colon to
168         separate the hostname from the path or a rsync:// URL.
169
170         it() the remote server may print a message of the day when you
171         connect.
172
173         it() if you specify no path name on the remote server then the
174         list of accessible paths on the server will be shown.
175
176         it() if you specify no local destination then a listing of the
177         specified files on the remote server is provided.
178 )
179
180 Some paths on the remote server may require authentication. If so then
181 you will receive a password prompt when you connect. You can avoid the
182 password prompt by setting the environment variable RSYNC_PASSWORD to
183 the password you want to use or using the --password-file option. This
184 may be useful when scripting rsync.
185
186 WARNING: On some systems environment variables are visible to all
187 users. On those systems using --password-file is recommended.
188
189 manpagesection(CONNECTING TO AN RSYNC SERVER OVER A REMOTE SHELL PROGRAM)
190
191 It is sometimes useful to be able to set up file transfers using rsync
192 server capabilities on the remote machine, while still using rsh or
193 ssh for transport.  This is especially useful when you want to connect
194 to a remote machine via ssh (for encryption or to get through a
195 firewall), but you still want to have access to the rsync server
196 features (see RUNNING AN RSYNC SERVER OVER A REMOTE SHELL PROGRAM,
197 below).  
198
199 From the user's perspective, using rsync in this way is the same as
200 using it to connect to an rsync server, except that you must
201 explicitly set the remote shell program on the command line with
202 --rsh=COMMAND.  (Setting RSYNC_RSH in the environment will not turn on
203 this functionality.)
204
205 In order to distinguish between the remote-shell user and the rsync
206 server user, you can use '-l user' on your remote-shell command:
207
208 quote(rsync -av --rsh="ssh -l ssh-user" rsync-user@host::module[/path] local-path)
209
210 The "ssh-user" will be used at the ssh level; the "rsync-user" will be
211 used to check against the rsyncd.conf on the remote host.
212
213 manpagesection(RUNNING AN RSYNC SERVER)
214
215 An rsync server is configured using a config file.  Please see the 
216 rsyncd.conf(5) man page for more information.  By default the configuration
217 file is called /etc/rsyncd.conf, unless rsync is running over a remote
218 shell program and is not running as root; in that case, the default name
219 is rsyncd.conf in the current directory on the remote computer 
220 (typically $HOME).
221
222 manpagesection(RUNNING AN RSYNC SERVER OVER A REMOTE SHELL PROGRAM)
223
224 See the rsyncd.conf(5) man page for full information on the rsync
225 server configuration file.  
226
227 Several configuration options will not be available unless the remote
228 user is root (e.g. chroot, setuid/setgid, etc.).  There is no need to
229 configure inetd or the services map to include the rsync server port
230 if you run an rsync server only via a remote shell program.
231
232 To run an rsync server out of a single-use ssh key, use the
233 "command=em(COMMAND)" syntax in the remote user's
234 authorized_keys entry, where command would be
235
236 quote(rsync --server --daemon .)
237
238 NOTE: rsync's argument parsing expects the trailing ".", so make sure
239 that it's there.  If you want to use a rsyncd.conf(5)-style
240 configuration file other than the default, you can added a
241 --config option to the em(command):
242
243 quote(rsync --server --daemon --config=em(file) .)
244
245 manpagesection(EXAMPLES)
246
247 Here are some examples of how I use rsync.
248
249 To backup my wife's home directory, which consists of large MS Word
250 files and mail folders, I use a cron job that runs
251
252 quote(rsync -Cavz . arvidsjaur:backup)
253
254 each night over a PPP connection to a duplicate directory on my machine
255 "arvidsjaur".
256
257 To synchronize my samba source trees I use the following Makefile
258 targets:
259
260 quote(      get:nl()
261        rsync -avuzb --exclude '*~' samba:samba/ .
262
263       put:nl()
264        rsync -Cavuzb . samba:samba/
265
266       sync: get put)
267
268 this allows me to sync with a CVS directory at the other end of the
269 connection. I then do cvs operations on the remote machine, which saves a
270 lot of time as the remote cvs protocol isn't very efficient.
271
272 I mirror a directory between my "old" and "new" ftp sites with the
273 command
274
275 quote(rsync -az -e ssh --delete ~ftp/pub/samba/ nimbus:"~ftp/pub/tridge/samba")
276
277 this is launched from cron every few hours.
278
279 manpagesection(OPTIONS SUMMARY)
280
281 Here is a short summary of the options available in rsync. Please refer
282 to the detailed description below for a complete description.
283
284 verb(
285  -v, --verbose               increase verbosity
286  -q, --quiet                 decrease verbosity
287  -c, --checksum              always checksum
288  -a, --archive               archive mode, equivalent to -rlptgoD
289  -r, --recursive             recurse into directories
290  -R, --relative              use relative path names
291  -b, --backup                make backups (default ~ suffix)
292      --backup-dir            make backups into this directory
293      --suffix=SUFFIX         define backup suffix
294  -u, --update                update only (don't overwrite newer files)
295  -l, --links                 copy symlinks as symlinks
296  -L, --copy-links            copy the referent of symlinks
297      --copy-unsafe-links     copy links outside the source tree
298      --safe-links            ignore links outside the destination tree
299  -H, --hard-links            preserve hard links
300  -p, --perms                 preserve permissions
301  -o, --owner                 preserve owner (root only)
302  -g, --group                 preserve group
303  -D, --devices               preserve devices (root only)
304  -t, --times                 preserve times
305  -S, --sparse                handle sparse files efficiently
306  -n, --dry-run               show what would have been transferred
307  -W, --whole-file            copy whole files, no incremental checks
308      --no-whole-file         turn off --whole-file
309  -x, --one-file-system       don't cross filesystem boundaries
310  -B, --block-size=SIZE       checksum blocking size (default 700)
311  -e, --rsh=COMMAND           specify the remote shell to use
312      --rsync-path=PATH       specify path to rsync on the remote machine
313  -C, --cvs-exclude           auto ignore files in the same way CVS does
314      --existing              only update files that already exist
315      --ignore-existing       ignore files that already exist on the receiving side
316      --delete                delete files that don't exist on the sending side
317      --delete-excluded       also delete excluded files on the receiving side
318      --delete-after          delete after transferring, not before
319      --ignore-errors         delete even if there are IO errors
320      --max-delete=NUM        don't delete more than NUM files
321      --partial               keep partially transferred files
322      --force                 force deletion of directories even if not empty
323      --numeric-ids           don't map uid/gid values by user/group name
324      --timeout=TIME          set IO timeout in seconds
325  -I, --ignore-times          don't exclude files that match length and time
326      --size-only             only use file size when determining if a file should be transferred
327      --modify-window=NUM     Timestamp window (seconds) for file match (default=0)
328  -T  --temp-dir=DIR          create temporary files in directory DIR
329      --compare-dest=DIR      also compare destination files relative to DIR
330      --link-dest=DIR         create hardlinks to DIR for unchanged files
331  -P                          equivalent to --partial --progress
332  -z, --compress              compress file data
333      --exclude=PATTERN       exclude files matching PATTERN
334      --exclude-from=FILE     exclude patterns listed in FILE
335      --include=PATTERN       don't exclude files matching PATTERN
336      --include-from=FILE     don't exclude patterns listed in FILE
337      --version               print version number
338      --daemon                run as a rsync daemon
339      --no-detach             do not detach from the parent
340      --address=ADDRESS       bind to the specified address
341      --config=FILE           specify alternate rsyncd.conf file
342      --port=PORT             specify alternate rsyncd port number
343      --blocking-io           use blocking IO for the remote shell
344      --no-blocking-io        turn off --blocking-io
345      --stats                 give some file transfer stats
346      --progress              show progress during transfer
347      --log-format=FORMAT     log file transfers using specified format
348      --password-file=FILE    get password from FILE
349      --bwlimit=KBPS          limit I/O bandwidth, KBytes per second
350      --read-batch=PREFIX     read batch fileset starting with PREFIX
351      --write-batch=PREFIX    write batch fileset starting with PREFIX
352  -h, --help                  show this help screen
353
354
355 )
356
357 manpageoptions()
358
359 rsync uses the GNU long options package. Many of the command line
360 options have two variants, one short and one long.  These are shown
361 below, separated by commas. Some options only have a long variant.
362 The '=' for options that take a parameter is optional; whitespace
363 can be used instead.
364
365 startdit()
366 dit(bf(-h, --help)) Print a short help page describing the options
367 available in rsync
368
369 dit(bf(--version)) print the rsync version number and exit
370
371 dit(bf(-v, --verbose)) This option increases the amount of information you
372 are given during the transfer.  By default, rsync works silently. A
373 single -v will give you information about what files are being
374 transferred and a brief summary at the end. Two -v flags will give you
375 information on what files are being skipped and slightly more
376 information at the end. More than two -v flags should only be used if
377 you are debugging rsync.
378
379 dit(bf(-q, --quiet)) This option decreases the amount of information you
380 are given during the transfer, notably suppressing information messages
381 from the remote server. This flag is useful when invoking rsync from
382 cron.
383
384 dit(bf(-I, --ignore-times)) Normally rsync will skip any files that are
385 already the same length and have the same time-stamp. This option turns
386 off this behavior.
387
388 dit(bf(--size-only)) Normally rsync will skip any files that are
389 already the same length and have the same time-stamp. With the
390 --size-only option files will be skipped if they have the same size,
391 regardless of timestamp. This is useful when starting to use rsync
392 after using another mirroring system which may not preserve timestamps
393 exactly.
394
395 dit(bf(--modify-window)) When comparing two timestamps rsync treats
396 the timestamps as being equal if they are within the value of
397 modify_window. This is normally zero, but you may find it useful to
398 set this to a larger value in some situations. In particular, when
399 transferring to Windows FAT filesystems which cannot represent times
400 with a 1 second resolution --modify-window=1 is useful.
401
402 dit(bf(-c, --checksum)) This forces the sender to checksum all files using
403 a 128-bit MD4 checksum before transfer. The checksum is then
404 explicitly checked on the receiver and any files of the same name
405 which already exist and have the same checksum and size on the
406 receiver are skipped.  This option can be quite slow.
407
408 dit(bf(-a, --archive)) This is equivalent to -rlptgoD. It is a quick
409 way of saying you want recursion and want to preserve almost
410 everything.  
411
412 Note however that bf(-a) bf(does not preserve hardlinks), because
413 finding multiply-linked files is expensive.  You must separately
414 specify bf(-H).
415
416 dit(bf(-r, --recursive)) This tells rsync to copy directories
417 recursively. If you don't specify this then rsync won't copy
418 directories at all.
419
420 dit(bf(-R, --relative)) Use relative paths. This means that the full path
421 names specified on the command line are sent to the server rather than
422 just the last parts of the filenames. This is particularly useful when
423 you want to send several different directories at the same time. For
424 example, if you used the command
425
426 verb(rsync foo/bar/foo.c remote:/tmp/)
427
428 then this would create a file called foo.c in /tmp/ on the remote
429 machine. If instead you used
430
431 verb(rsync -R foo/bar/foo.c remote:/tmp/)
432
433 then a file called /tmp/foo/bar/foo.c would be created on the remote
434 machine. The full path name is preserved.
435
436 dit(bf(-b, --backup)) With this option preexisting destination files are
437 renamed with a ~ extension as each file is transferred.  You can
438 control the backup suffix using the --suffix option.
439
440 dit(bf(--backup-dir=DIR)) In combination with the --backup option, this
441 tells rsync to store all backups in the specified directory. This is
442 very useful for incremental backups.  You can additionally
443 specify a backup suffix using the --suffix option
444 (otherwise the files backed up in the specified directory
445 will keep their original filenames).
446
447 dit(bf(--suffix=SUFFIX)) This option allows you to override the default
448 backup suffix used with the -b option. The default is a ~.
449 If --backup-dir and --suffix are both specified,
450 the SUFFIX is appended to the filename even in the backup directory.
451
452 dit(bf(-u, --update)) This forces rsync to skip any files for which the
453 destination file already exists and has a date later than the source
454 file.
455
456 dit(bf(-l, --links)) When symlinks are encountered, recreate the
457 symlink on the destination.
458
459 dit(bf(-L, --copy-links)) When symlinks are encountered, the file that
460 they point to is copied, rather than the symlink.
461
462 dit(bf(--copy-unsafe-links)) This tells rsync to copy the referent of
463 symbolic links that point outside the source tree.  Absolute symlinks
464 are also treated like ordinary files, and so are any symlinks in the
465 source path itself when --relative is used.
466
467 dit(bf(--safe-links)) This tells rsync to ignore any symbolic links
468 which point outside the destination tree. All absolute symlinks are
469 also ignored. Using this option in conjunction with --relative may
470 give unexpected results. 
471
472 dit(bf(-H, --hard-links)) This tells rsync to recreate hard  links  on
473 the  remote system  to  be the same as the local system. Without this
474 option hard links are treated like regular files.
475
476 Note that rsync can only detect hard links if both parts of the link
477 are in the list of files being sent.
478
479 This option can be quite slow, so only use it if you need it.
480
481 dit(bf(-W, --whole-file)) With this option the incremental rsync algorithm
482 is not used and the whole file is sent as-is instead.  The transfer may be
483 faster if this option is used when the bandwidth between the source and
484 target machines is higher than the bandwidth to disk (especially when the
485 "disk" is actually a networked file system).  This is the default when both
486 the source and target are on the local machine.
487
488 dit(bf(--no-whole-file)) Turn off --whole-file, for use when it is the
489 default.
490
491 dit(bf(-p, --perms)) This option causes rsync to update the remote
492 permissions to be the same as the local permissions.
493
494 dit(bf(-o, --owner)) This option causes rsync to set the owner of the
495 destination file to be the same as the source file.  On most systems,
496 only the super-user can set file ownership.  Note that if the remote system
497 is a daemon using chroot, the --numeric-ids option is implied because the
498 remote system cannot get access to the usernames from /etc/passwd.
499
500 dit(bf(-g, --group)) This option causes rsync to set the group of the
501 destination file to be the same as the source file.  If the receiving
502 program is not running as the super-user, only groups that the
503 receiver is a member of will be preserved (by group name, not group id
504 number).
505
506 dit(bf(-D, --devices)) This option causes rsync to transfer character and
507 block device information to the remote system to recreate these
508 devices. This option is only available to the super-user.
509
510 dit(bf(-t, --times)) This tells rsync to transfer modification times along
511 with the files and update them on the remote system.  Note that if this
512 option is not used, the optimization that excludes files that have not been
513 modified cannot be effective; in other words, a missing -t or -a will
514 cause the next transfer to behave as if it used -I, and all files will have
515 their checksums compared and show up in log messages even if they haven't
516 changed.
517
518 dit(bf(-n, --dry-run)) This tells rsync to not do any file transfers,
519 instead it will just report the actions it would have taken.
520
521 dit(bf(-S, --sparse)) Try to handle sparse files efficiently so they take
522 up less space on the destination.
523
524 NOTE: Don't use this option when the destination is a Solaris "tmpfs"
525 filesystem. It doesn't seem to handle seeks over null regions
526 correctly and ends up corrupting the files.
527
528 dit(bf(-x, --one-file-system)) This tells rsync not to cross filesystem
529 boundaries  when recursing.  This  is useful for transferring the
530 contents of only one filesystem.
531
532 dit(bf(--existing)) This tells rsync not to create any new files -
533 only update files that already exist on the destination.
534
535 dit(bf(--ignore-existing))
536 This tells rsync not to update files that already exist on 
537 the destination. 
538
539 dit(bf(--max-delete=NUM)) This tells rsync not to delete more than NUM
540 files or directories. This is useful when mirroring very large trees
541 to prevent disasters.
542
543 dit(bf(--delete)) This tells rsync to delete any files on the receiving
544 side that aren't on the sending side.   Files that are excluded from
545 transfer are excluded from being deleted unless you use --delete-excluded.
546
547 This option has no effect if directory recursion is not selected.
548
549 This option can be dangerous if used incorrectly!  It is a very good idea
550 to run first using the dry run option (-n) to see what files would be
551 deleted to make sure important files aren't listed.
552
553 If the sending side detects any IO errors then the deletion of any
554 files at the destination will be automatically disabled. This is to
555 prevent temporary filesystem failures (such as NFS errors) on the
556 sending side causing a massive deletion of files on the
557 destination.  You can override this with the --ignore-errors option.
558
559 dit(bf(--delete-excluded)) In addition to deleting the files on the
560 receiving side that are not on the sending side, this tells rsync to also
561 delete any files on the receiving side that are excluded (see --exclude).
562 Implies --delete.
563
564 dit(bf(--delete-after)) By default rsync does file deletions before
565 transferring files to try to ensure that there is sufficient space on
566 the receiving filesystem. If you want to delete after transferring
567 then use the --delete-after switch. Implies --delete.
568
569 dit(bf(--ignore-errors)) Tells --delete to go ahead and delete files
570 even when there are IO errors.
571
572 dit(bf(--force)) This options tells rsync to delete directories even if
573 they are not empty when they are to be replaced by non-directories.  This
574 is only relevant without --delete because deletions are now done depth-first.
575 Requires the --recursive option (which is implied by -a) to have any effect.
576
577 dit(bf(-B , --block-size=BLOCKSIZE)) This controls the block size used in
578 the rsync algorithm. See the technical report for details.
579
580 dit(bf(-e, --rsh=COMMAND)) This option allows you to choose an alternative
581 remote shell program to use for communication between the local and
582 remote copies of rsync. Typically, rsync is configured to use rsh by
583 default, but you may prefer to use ssh because of its high security.
584
585 If this option is used with bf([user@]host::module/path), then the
586 remote shell em(COMMMAND) will be used to run an rsync server on the
587 remote host, and all data will be transmitted through that remote
588 shell connection, rather than through a direct socket connection to a
589 running rsync server on the remote host.  See the section "CONNECTING
590 TO AN RSYNC SERVER OVER A REMOTE SHELL PROGRAM" above.
591
592 Command-line arguments are permitted in COMMAND provided that COMMAND is
593 presented to rsync as a single argument.  For example:
594
595 quote(-e "ssh -p 2234")
596
597 (Note that ssh users can alternately customize site-specific connect
598 options in their .ssh/config file.)
599
600 You can also choose the remote shell program using the RSYNC_RSH
601 environment variable, which accepts the same range of values as -e.
602
603 See also the --blocking-io option which is affected by this option.
604
605 dit(bf(--rsync-path=PATH)) Use this to specify the path to the copy of
606 rsync on the remote machine. Useful when it's not in your path. Note
607 that this is the full path to the binary, not just the directory that
608 the binary is in.
609
610 dit(bf(--exclude=PATTERN)) This option allows you to selectively exclude
611 certain files from the list of files to be transferred. This is most
612 useful in combination with a recursive transfer.
613
614 You may use as many --exclude options on the command line as you like
615 to build up the list of files to exclude.
616
617 See the section on exclude patterns for information on the syntax of 
618 this option.
619
620 dit(bf(--exclude-from=FILE)) This option is similar to the --exclude
621 option, but instead it adds all exclude patterns listed in the file
622 FILE to the exclude list.  Blank lines in FILE and lines starting with
623 ';' or '#' are ignored.
624 If em(FILE) is bf(-) the list will be read from standard input.
625
626
627 dit(bf(--include=PATTERN)) This option tells rsync to not exclude the
628 specified pattern of filenames. This is useful as it allows you to
629 build up quite complex exclude/include rules.
630
631 See the section of exclude patterns for information on the syntax of 
632 this option.
633
634 dit(bf(--include-from=FILE)) This specifies a list of include patterns
635 from a file.
636 If em(FILE) is bf(-) the list will be read from standard input.
637
638
639 dit(bf(-C, --cvs-exclude)) This is a useful shorthand for excluding a
640 broad range of files that you often don't want to transfer between
641 systems. It uses the same algorithm that CVS uses to determine if
642 a file should be ignored.
643
644 The exclude list is initialized to:
645
646 quote(RCS/ SCCS/ CVS/ .svn/ CVS.adm RCSLOG cvslog.* tags TAGS .make.state
647 .nse_depinfo *~ #* .#* ,* *.old *.bak *.BAK *.orig *.rej .del-*
648 *.a *.o *.obj *.so *.Z *.elc *.ln core)
649
650 then files listed in a $HOME/.cvsignore are added to the list and any
651 files listed in the CVSIGNORE environment variable (space delimited).
652
653 Finally, any file is ignored if it is in the same directory as a
654 .cvsignore file and matches one of the patterns listed therein.  See
655 the bf(cvs(1)) manual for more information.
656
657 dit(bf(-T, --temp-dir=DIR)) This option instructs rsync to use DIR as a
658 scratch directory when creating temporary copies of the files
659 transferred on the receiving side.  The default behavior is to create
660 the temporary files in the receiving directory.
661
662 dit(bf(--compare-dest=DIR)) This option instructs rsync to use DIR on
663 the destination machine as an additional directory to compare destination
664 files against when doing transfers if the files are missing in the
665 destination directory.  This is useful for doing transfers to a new
666 destination while leaving existing files intact, and then doing a
667 flash-cutover when all files have been successfully transferred (for
668 example by moving directories around and removing the old directory,
669 although this skips files that haven't changed; see also --link-dest).
670 This option increases the usefulness of --partial because partially
671 transferred files will remain in the new temporary destination until they
672 have a chance to be completed.  If DIR is a relative path, it is relative
673 to the destination directory.
674
675 dit(bf(--link-dest=DIR)) This option behaves like bf(--compare-dest) but
676 also will create hard links from em(DIR) to the destination directory for
677 unchanged files.  Files with changed ownership or permissions will not be
678 linked.
679
680 dit(bf(-z, --compress)) With this option, rsync compresses any data from
681 the files that it sends to the destination machine.  This
682 option is useful on slow connections.  The compression method used is the
683 same method that gzip uses.
684
685 Note this this option typically achieves better compression ratios
686 that can be achieved by using a compressing remote shell, or a
687 compressing transport, as it takes advantage of the implicit
688 information sent for matching data blocks.
689
690 dit(bf(--numeric-ids)) With this option rsync will transfer numeric group
691 and user ids rather than using user and group names and mapping them
692 at both ends.
693
694 By default rsync will use the user name and group name to determine
695 what ownership to give files. The special uid 0 and the special group
696 0 are never mapped via user/group names even if the --numeric-ids
697 option is not specified.
698
699 If the source system is a daemon using chroot, or if a user or group
700 name does not exist on the destination system, then the numeric id
701 from the source system is used instead.
702
703 dit(bf(--timeout=TIMEOUT)) This option allows you to set a maximum IO
704 timeout in seconds. If no data is transferred for the specified time
705 then rsync will exit. The default is 0, which means no timeout.
706
707 dit(bf(--daemon)) This tells rsync that it is to run as a daemon.  The
708 daemon may be accessed using the bf(host::module) or
709 bf(rsync://host/module/) syntax.
710
711 If standard input is a socket then rsync will assume that it is being
712 run via inetd, otherwise it will detach from the current terminal and
713 become a background daemon.  The daemon will read the config file
714 (rsyncd.conf) on each connect made by a client and respond to
715 requests accordingly.  See the rsyncd.conf(5) man page for more
716 details.
717
718 dit(bf(--no-detach)) When running as a daemon, this option instructs
719 rsync to not detach itself and become a background process.  This
720 option is required when running as a service on Cygwin, and may also
721 be useful when rsync is supervised by a program such as
722 bf(daemontools) or AIX's bf(System Resource Controller).
723 bf(--no-detach) is also recommended when rsync is run under a
724 debugger.  This option has no effect if rsync is run from inetd or
725 sshd.
726
727 dit(bf(--address)) By default rsync will bind to the wildcard address
728 when run as a daemon with the --daemon option or when connecting to a
729 rsync server. The --address option allows you to specify a specific IP
730 address (or hostname) to bind to. This makes virtual hosting possible
731 in conjunction with the --config option.
732
733 dit(bf(--config=FILE)) This specifies an alternate config file than
734 the default.  This is only relevant when --daemon is specified. 
735 The default is /etc/rsyncd.conf unless the daemon is running over
736 a remote shell program and the remote user is not root; in that case
737 the default is rsyncd.conf in the current directory (typically $HOME).
738
739 dit(bf(--port=PORT)) This specifies an alternate TCP port number to use
740 rather than the default port 873.
741
742 dit(bf(--blocking-io)) This tells rsync to use blocking IO when launching
743 a remote shell transport.  If -e or --rsh are not specified or are set to
744 the default "rsh", this defaults to blocking IO, otherwise it defaults to
745 non-blocking IO.  You may find the --blocking-io option is needed for some
746 remote shells that can't handle non-blocking IO.  (Note that ssh prefers
747 non-blocking IO.)
748
749 dit(bf(--no-blocking-io)) Turn off --blocking-io, for use when it is the
750 default.
751
752 dit(bf(--log-format=FORMAT)) This allows you to specify exactly what the
753 rsync client logs to stdout on a per-file basis. The log format is
754 specified using the same format conventions as the log format option in
755 rsyncd.conf.
756
757 dit(bf(--stats)) This tells rsync to print a verbose set of statistics
758 on the file transfer, allowing you to tell how effective the rsync
759 algorithm is for your data.
760
761 dit(bf(--partial)) By default, rsync will delete any partially
762 transferred file if the transfer is interrupted. In some circumstances
763 it is more desirable to keep partially transferred files. Using the
764 --partial option tells rsync to keep the partial file which should
765 make a subsequent transfer of the rest of the file much faster.
766
767 dit(bf(--progress)) This option tells rsync to print information
768 showing the progress of the transfer. This gives a bored user
769 something to watch.
770
771 This option is normally combined with -v. Using this option without
772 the -v option will produce weird results on your display.
773
774 dit(bf(-P)) The -P option is equivalent to --partial --progress. I
775 found myself typing that combination quite often so I created an
776 option to make it easier.
777
778 dit(bf(--password-file)) This option allows you to provide a password
779 in a file for accessing a remote rsync server. Note that this option
780 is only useful when accessing a rsync server using the built in
781 transport, not when using a remote shell as the transport. The file
782 must not be world readable. It should contain just the password as a
783 single line.
784
785 dit(bf(--bwlimit=KBPS)) This option allows you to specify a maximum
786 transfer rate in kilobytes per second. This option is most effective when
787 using rsync with large files (several megabytes and up). Due to the nature
788 of rsync transfers, blocks of data are sent, then if rsync determines the
789 transfer was too fast, it will wait before sending the next data block. The
790 result is an average transfer rate equalling the specified limit. A value
791 of zero specifies no limit.
792
793 dit(bf(--write-batch=PREFIX)) Generate a set of files that can be
794 transferred as a batch update. Each filename in the set starts with
795 PREFIX. See the "BATCH MODE" section for details.
796
797 dit(bf(--read-batch=PREFIX)) Apply a previously generated change batch,
798 using the fileset whose filenames start with PREFIX. See the "BATCH
799 MODE" section for details.
800
801 enddit()
802
803 manpagesection(EXCLUDE PATTERNS)
804
805 The exclude and include patterns specified to rsync allow for flexible
806 selection of which files to transfer and which files to skip.
807
808 rsync builds an ordered list of include/exclude options as specified on
809 the command line. When a filename is encountered, rsync checks the
810 name against each exclude/include pattern in turn. The first matching
811 pattern is acted on. If it is an exclude pattern, then that file is
812 skipped. If it is an include pattern then that filename is not
813 skipped. If no matching include/exclude pattern is found then the
814 filename is not skipped.
815
816 Note that when used with -r (which is implied by -a), every subcomponent of
817 every path is visited from top down, so include/exclude patterns get
818 applied recursively to each subcomponent.
819
820 Note also that the --include and --exclude options take one pattern
821 each. To add multiple patterns use the --include-from and
822 --exclude-from options or multiple --include and --exclude options. 
823
824 The patterns can take several forms. The rules are:
825
826 itemize(
827   it() if the pattern starts with a / then it is matched against the
828   start of the filename, otherwise it is matched against the end of
829   the filename.  Thus "/foo" would match a file called "foo" at the base of
830   the tree.  On the other hand, "foo" would match any file called "foo"
831   anywhere in the tree because the algorithm is applied recursively from
832   top down; it behaves as if each path component gets a turn at being the
833   end of the file name.
834
835   it() if the pattern ends with a / then it will only match a
836   directory, not a file, link or device.
837
838   it() if the pattern contains a wildcard character from the set
839   *?[ then expression matching is applied using the shell filename
840   matching rules. Otherwise a simple string match is used.
841
842   it() if the pattern includes a double asterisk "**" then all wildcards in
843   the pattern will match slashes, otherwise they will stop at slashes.
844
845   it() if the pattern contains a / (not counting a trailing /) then it
846   is matched against the full filename, including any leading
847   directory. If the pattern doesn't contain a / then it is matched
848   only against the final component of the filename.  Again, remember
849   that the algorithm is applied recursively so "full filename" can 
850   actually be any portion of a path.
851
852   it() if the pattern starts with "+ " (a plus followed by a space)
853   then it is always considered an include pattern, even if specified as
854   part of an exclude option. The "+ " part is discarded before matching.
855
856   it() if the pattern starts with "- " (a minus followed by a space)
857   then it is always considered an exclude pattern, even if specified as
858   part of an include option. The "- " part is discarded before matching.
859
860   it() if the pattern is a single exclamation mark ! then the current
861   include/exclude list is reset, removing all previously defined patterns.
862 )
863
864 The +/- rules are most useful in exclude lists, allowing you to have a
865 single exclude list that contains both include and exclude options.
866
867 If you end an exclude list with --exclude '*', note that since the
868 algorithm is applied recursively that unless you explicitly include
869 parent directories of files you want to include then the algorithm
870 will stop at the parent directories and never see the files below
871 them.  To include all directories, use --include '*/' before the
872 --exclude '*'.
873
874 Here are some exclude/include examples:
875
876 itemize(
877   it() --exclude "*.o" would exclude all filenames matching *.o
878   it() --exclude "/foo" would exclude a file in the base directory called foo
879   it() --exclude "foo/" would exclude any directory called foo
880   it() --exclude "/foo/*/bar" would exclude any file called bar two
881   levels below a base directory called foo
882   it() --exclude "/foo/**/bar" would exclude any file called bar two
883   or more levels below a base directory called foo
884   it() --include "*/" --include "*.c" --exclude "*" would include all 
885   directories and C source files
886   it() --include "foo/" --include "foo/bar.c" --exclude "*" would include
887   only foo/bar.c (the foo/ directory must be explicitly included or
888   it would be excluded by the "*")
889 )
890
891 manpagesection(BATCH MODE)
892
893 bf(Note:) Batch mode should be considered experimental in this version
894 of rsync. The interface or behaviour may change before it stabilizes.
895
896 Batch mode can be used to apply the same set of updates to many
897 identical systems. Suppose one has a tree which is replicated on a
898 number of hosts.  Now suppose some changes have been made to this
899 source tree and those changes need to be propagated to the other
900 hosts. In order to do this using batch mode, rsync is run with the
901 write-batch option to apply the changes made to the source tree to one
902 of the destination trees.  The write-batch option causes the rsync
903 client to store the information needed to repeat this operation against
904 other destination trees in a batch update fileset (see below).  The
905 filename of each file in the fileset starts with a prefix specified by
906 the user as an argument to the write-batch option.  This fileset is
907 then copied to each remote host, where rsync is run with the read-batch
908 option, again specifying the same prefix, and the destination tree.
909 Rsync updates the destination tree using the information stored in the
910 batch update fileset.
911
912 The fileset consists of 4 files:
913
914 itemize(
915 it() bf(<prefix>.rsync_argvs) command-line arguments
916 it() bf(<prefix>.rsync_flist) rsync internal file metadata
917 it() bf(<prefix>.rsync_csums) rsync checksums
918 it() bf(<prefix>.rsync_delta) data blocks for file update & change
919 )
920
921 The .rsync_argvs file contains a command-line suitable for updating a
922 destination tree using that batch update fileset. It can be executed
923 using a Bourne(-like) shell, optionally passing in an alternate
924 destination tree pathname which is then used instead of the original
925 path. This is useful when the destination tree path differs from the
926 original destination tree path.
927
928 Generating the batch update fileset once saves having to perform the
929 file status, checksum and data block generation more than once when
930 updating multiple destination trees. Multicast transport protocols can
931 be used to transfer the batch update files in parallel to many hosts at
932 once, instead of sending the same data to every host individually.
933
934 Example:
935
936 verb(
937 $ rsync --write_batch=pfx -a /source/dir/ /adest/dir/
938 $ rcp pfx.rsync_* remote:
939 $ rsh remote rsync --read_batch=pfx -a /bdest/dir/
940 # or alternatively
941 $ rsh remote ./pfx.rsync_argvs /bdest/dir/
942 )
943
944 In this example, rsync is used to update /adest/dir/ with /source/dir/
945 and the information to repeat this operation is stored in the files
946 pfx.rsync_*. These files are then copied to the machine named "remote".
947 Rsync is then invoked on "remote" to update /bdest/dir/ the same way as
948 /adest/dir/. The last line shows the rsync_argvs file being used to
949 invoke rsync.
950
951 Caveats:
952
953 The read-batch option expects the destination tree it is meant to update
954 to be identical to the destination tree that was used to create the
955 batch update fileset.  When a difference between the destination trees
956 is encountered the update will fail at that point, leaving the
957 destination tree in a partially updated state. In that case, rsync can
958 be used in its regular (non-batch) mode of operation to fix up the
959 destination tree.
960
961 The rsync version used on all destinations should be identical to the
962 one used on the original destination.
963
964 The -z/--compress option does not work in batch mode and yields a usage
965 error. A separate compression tool can be used instead to reduce the
966 size of the batch update files for transport to the destination.
967
968 The -n/--dryrun option does not work in batch mode and yields a runtime
969 error.
970
971 See bf(http://www.ils.unc.edu/i2dsi/unc_rsync+.html) for papers and technical
972 reports.
973
974 manpagesection(SYMBOLIC LINKS)
975
976 Three basic behaviours are possible when rsync encounters a symbolic
977 link in the source directory.
978
979 By default, symbolic links are not transferred at all.  A message
980 "skipping non-regular" file is emitted for any symlinks that exist.
981
982 If bf(--links) is specified, then symlinks are recreated with the same
983 target on the destination.  Note that bf(--archive) implies
984 bf(--links).
985
986 If bf(--copy-links) is specified, then symlinks are "collapsed" by
987 copying their referent, rather than the symlink.
988
989 rsync also distinguishes "safe" and "unsafe" symbolic links.  An
990 example where this might be used is a web site mirror that wishes
991 ensure the rsync module they copy does not include symbolic links to
992 bf(/etc/passwd) in the public section of the site.  Using
993 bf(--copy-unsafe-links) will cause any links to be copied as the file
994 they point to on the destination.  Using bf(--safe-links) will cause
995 unsafe links to be ommitted altogether.
996
997 Symbolic links are considered unsafe if they are absolute symlinks
998 (start with bf(/)), empty, or if they contain enough bf("..")
999 components to ascend from the directory being copied.
1000
1001 manpagesection(DIAGNOSTICS)
1002
1003 rsync occasionally produces error messages that may seem a little
1004 cryptic. The one that seems to cause the most confusion is "protocol
1005 version mismatch - is your shell clean?".
1006
1007 This message is usually caused by your startup scripts or remote shell
1008 facility producing unwanted garbage on the stream that rsync is using
1009 for its transport. The way to diagnose this problem is to run your
1010 remote shell like this:
1011
1012 verb(
1013    rsh remotehost /bin/true > out.dat
1014 )
1015        
1016 then look at out.dat. If everything is working correctly then out.dat
1017 should be a zero length file. If you are getting the above error from
1018 rsync then you will probably find that out.dat contains some text or
1019 data. Look at the contents and try to work out what is producing
1020 it. The most common cause is incorrectly configured shell startup
1021 scripts (such as .cshrc or .profile) that contain output statements
1022 for non-interactive logins.
1023
1024 If you are having trouble debugging include and exclude patterns, then
1025 try specifying the -vv option.  At this level of verbosity rsync will
1026 show why each individual file is included or excluded.
1027
1028 manpagesection(EXIT VALUES)
1029
1030 startdit()
1031 dit(bf(RERR_SYNTAX     1))       Syntax or usage error 
1032 dit(bf(RERR_PROTOCOL   2))       Protocol incompatibility 
1033 dit(bf(RERR_FILESELECT 3))       Errors selecting input/output files, dirs
1034
1035 dit(bf(RERR_UNSUPPORTED 4)) Requested action not supported: an attempt
1036 was made to manipulate 64-bit files on a platform that cannot support
1037 them; or an option was speciifed that is supported by the client and
1038 not by the server.
1039
1040 dit(bf(RERR_SOCKETIO   10))      Error in socket IO 
1041 dit(bf(RERR_FILEIO     11))      Error in file IO 
1042 dit(bf(RERR_STREAMIO   12))      Error in rsync protocol data stream 
1043 dit(bf(RERR_MESSAGEIO  13))      Errors with program diagnostics 
1044 dit(bf(RERR_IPC        14))      Error in IPC code 
1045 dit(bf(RERR_SIGNAL     20))      Received SIGUSR1 or SIGINT 
1046 dit(bf(RERR_WAITCHILD  21))      Some error returned by waitpid() 
1047 dit(bf(RERR_MALLOC     22))      Error allocating core memory buffers 
1048 dit(bf(RERR_TIMEOUT    30))      Timeout in data send/receive 
1049 enddit()
1050
1051 manpagesection(ENVIRONMENT VARIABLES)
1052
1053 startdit()
1054
1055 dit(bf(CVSIGNORE)) The CVSIGNORE environment variable supplements any
1056 ignore patterns in .cvsignore files. See the --cvs-exclude option for
1057 more details.
1058
1059 dit(bf(RSYNC_RSH)) The RSYNC_RSH environment variable allows you to
1060 override the default shell used as the transport for rsync.  Command line
1061 options are permitted after the command name, just as in the -e option.
1062
1063 dit(bf(RSYNC_PROXY)) The RSYNC_PROXY environment variable allows you to
1064 redirect your rsync client to use a web proxy when connecting to a
1065 rsync daemon. You should set RSYNC_PROXY to a hostname:port pair.
1066
1067 dit(bf(RSYNC_PASSWORD)) Setting RSYNC_PASSWORD to the required
1068 password allows you to run authenticated rsync connections to a rsync
1069 daemon without user intervention. Note that this does not supply a
1070 password to a shell transport such as ssh.
1071
1072 dit(bf(USER) or bf(LOGNAME)) The USER or LOGNAME environment variables
1073 are used to determine the default username sent to a rsync server.
1074
1075 dit(bf(HOME)) The HOME environment variable is used to find the user's
1076 default .cvsignore file.
1077
1078 enddit()
1079
1080 manpagefiles()
1081
1082 /etc/rsyncd.conf or rsyncd.conf
1083
1084 manpageseealso()
1085
1086 rsyncd.conf(5)
1087
1088 manpagediagnostics()
1089
1090 manpagebugs()
1091
1092 times are transferred as unix time_t values
1093
1094 When transferring to FAT filesystmes rsync may resync
1095 unmodified files.
1096 See the comments on the --modify-window option.
1097
1098 file permissions, devices etc are transferred as native numerical
1099 values
1100
1101 see also the comments on the --delete option
1102
1103 Please report bugs! See the website at
1104 url(http://rsync.samba.org/)(http://rsync.samba.org/)
1105
1106 manpagesection(CREDITS)
1107
1108 rsync is distributed under the GNU public license.  See the file
1109 COPYING for details.
1110
1111 A WEB site is available at
1112 url(http://rsync.samba.org/)(http://rsync.samba.org/).  The site
1113 includes an FAQ-O-Matic which may cover questions unanswered by this
1114 manual page.
1115
1116 The primary ftp site for rsync is
1117 url(ftp://rsync.samba.org/pub/rsync)(ftp://rsync.samba.org/pub/rsync).
1118
1119 We would be delighted to hear from you if you like this program.
1120
1121 This program uses the excellent zlib compression library written by
1122 Jean-loup Gailly and Mark Adler.
1123
1124 manpagesection(THANKS)
1125
1126 Thanks to Richard Brent, Brendan Mackay, Bill Waite, Stephen Rothwell
1127 and David Bell for helpful suggestions, patches and testing of rsync.
1128 I've probably missed some people, my apologies if I have.
1129
1130 Especial thanks also to: David Dykstra, Jos Backus, Sebastian Krahmer.
1131
1132
1133 manpageauthor()
1134
1135 rsync was written by Andrew Tridgell <tridge@samba.org> and Paul
1136 Mackerras.
1137
1138 rsync is now maintained by Martin Pool <mbp@samba.org>.  
1139
1140 Mailing lists for support and development are available at
1141 url(http://lists.samba.org)(lists.samba.org) 
1142
1143 If you suspect you have found a security vulnerability in rsync,
1144 please send it directly to Martin Pool and Andrew Tridgell.  For other
1145 enquiries, please use the mailing list.