put a limit (default 1MB) on the read buffer size. This stops it
[rsync/rsync.git] / rsync.h
1 /* 
2    Copyright (C) Andrew Tridgell 1996
3    Copyright (C) Paul Mackerras 1996
4    
5    This program is free software; you can redistribute it and/or modify
6    it under the terms of the GNU General Public License as published by
7    the Free Software Foundation; either version 2 of the License, or
8    (at your option) any later version.
9    
10    This program is distributed in the hope that it will be useful,
11    but WITHOUT ANY WARRANTY; without even the implied warranty of
12    MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
13    GNU General Public License for more details.
14    
15    You should have received a copy of the GNU General Public License
16    along with this program; if not, write to the Free Software
17    Foundation, Inc., 675 Mass Ave, Cambridge, MA 02139, USA.
18 */
19
20 #define BLOCK_SIZE 700
21 #define RSYNC_RSH_ENV "RSYNC_RSH"
22
23 #define RSYNC_NAME "rsync"
24 #define RSYNCD_CONF "/etc/rsyncd.conf"
25
26 #define BACKUP_SUFFIX "~"
27
28 /* a non-zero CHAR_OFFSET makes the rolling sum stronger, but is
29    imcompatible with older versions :-( */
30 #define CHAR_OFFSET 0
31
32
33 #define FLAG_DELETE (1<<0)
34 #define SAME_MODE (1<<1)
35 #define SAME_RDEV (1<<2)
36 #define SAME_UID (1<<3)
37 #define SAME_GID (1<<4)
38 #define SAME_DIR (1<<5)
39 #define SAME_NAME SAME_DIR
40 #define LONG_NAME (1<<6)
41 #define SAME_TIME (1<<7)
42
43 /* update this if you make incompatible changes */
44 #define PROTOCOL_VERSION 17
45 #define MIN_PROTOCOL_VERSION 11
46 #define MAX_PROTOCOL_VERSION 30
47
48 #define RSYNC_PORT 873
49
50 #define SPARSE_WRITE_SIZE (1024)
51 #define WRITE_SIZE (32*1024)
52 #define CHUNK_SIZE (32*1024)
53 #define MAX_MAP_SIZE (4*1024*1024)
54 #define IO_BUFFER_SIZE (4096)
55 #define MAX_READ_BUFFER (1024*1024)
56
57 #define MAX_ARGS 1000
58
59 #define BLOCKING_TIMEOUT 10
60
61 #define FERROR 1
62 #define FINFO 2
63
64 #include "config.h"
65
66 #if HAVE_REMSH
67 #define RSYNC_RSH "remsh"
68 #else
69 #define RSYNC_RSH "rsh"
70 #endif
71
72 #include <sys/types.h>
73 #ifdef HAVE_UNISTD_H
74 #include <unistd.h>
75 #endif
76 #include <stdio.h>
77 #include <stddef.h>
78
79 #ifdef HAVE_SYS_PARAM_H
80 #include <sys/param.h>
81 #endif
82
83 #ifdef HAVE_STDLIB_H
84 #include <stdlib.h>
85 #endif
86
87 #ifdef HAVE_SYS_SOCKET_H
88 #include <sys/socket.h>
89 #endif
90
91 #ifdef HAVE_STRING_H
92 #include <string.h>
93 #endif
94
95 #ifdef HAVE_COMPAT_H
96 #include <compat.h>
97 #endif
98
99 #ifdef HAVE_MALLOC_H
100 #include <malloc.h>
101 #endif
102
103 #ifdef TIME_WITH_SYS_TIME
104 #include <sys/time.h>
105 #include <time.h>
106 #else
107 #ifdef HAVE_SYS_TIME_H
108 #include <sys/time.h>
109 #else
110 #include <time.h>
111 #endif
112 #endif
113
114 #ifdef HAVE_FCNTL_H
115 #include <fcntl.h>
116 #else
117 #ifdef HAVE_SYS_FCNTL_H
118 #include <sys/fcntl.h>
119 #endif
120 #endif
121
122 #include <sys/stat.h>
123
124 #ifdef HAVE_SYS_IOCTL_H
125 #include <sys/ioctl.h>
126 #endif
127
128 #ifdef HAVE_SYS_FILIO_H
129 #include <sys/filio.h>
130 #endif
131
132 #include <signal.h>
133 #ifdef HAVE_SYS_WAIT_H
134 #include <sys/wait.h>
135 #endif
136 #ifdef HAVE_CTYPE_H
137 #include <ctype.h>
138 #endif
139 #ifdef HAVE_GRP_H
140 #include <grp.h>
141 #endif
142 #include <errno.h>
143
144 #ifdef HAVE_MMAP
145 #include <sys/mman.h>
146 #endif
147
148 #ifdef HAVE_UTIME_H
149 #include <utime.h>
150 #endif
151
152 #ifdef HAVE_SYS_SELECT_H
153 #include <sys/select.h>
154 #endif
155
156 #ifdef HAVE_SYS_MODE_H
157 /* apparently AIX needs this for S_ISLNK */
158 #ifndef S_ISLNK
159 #include <sys/mode.h>
160 #endif
161 #endif
162
163 #ifdef HAVE_FNMATCH
164 #include <fnmatch.h>
165 #else
166 #include "lib/fnmatch.h"
167 #endif
168
169 #ifdef HAVE_GETOPT_LONG
170 #include <getopt.h>
171 #else
172 #include "lib/getopt.h"
173 #endif
174
175 #ifdef HAVE_GLOB
176 #include <glob.h>
177 #endif
178
179 /* these are needed for the uid/gid mapping code */
180 #include <pwd.h>
181 #include <grp.h>
182
183 #include <stdarg.h>
184 #include <netinet/in.h>
185 #include <arpa/inet.h>
186 #include <netdb.h>
187 #include <syslog.h>
188 #include <sys/file.h>
189
190 #ifndef S_IFLNK
191 #define S_IFLNK  0120000
192 #endif
193
194 #ifndef S_ISLNK
195 #define S_ISLNK(mode) (((mode) & S_IFLNK) == S_IFLNK)
196 #endif
197
198 #define BOOL int
199
200 #ifndef uchar
201 #define uchar unsigned char
202 #endif
203
204 #if HAVE_UNSIGNED_CHAR
205 #define schar signed char
206 #else
207 #define schar char
208 #endif
209
210 #ifndef int32
211 #if (SIZEOF_INT == 4)
212 #define int32 int
213 #elif (SIZEOF_LONG == 4)
214 #define int32 long
215 #elif (SIZEOF_SHORT == 4)
216 #define int32 short
217 #endif
218 #endif
219
220 #ifndef uint32
221 #define uint32 unsigned int32
222 #endif
223
224 #if HAVE_OFF64_T
225 #define OFF_T off64_t
226 #define STRUCT_STAT struct stat64
227 #else
228 #define OFF_T off_t
229 #define STRUCT_STAT struct stat
230 #endif
231
232 #if HAVE_OFF64_T
233 #define int64 off64_t
234 #elif (SIZEOF_LONG == 8) 
235 #define int64 long
236 #elif (SIZEOF_INT == 8) 
237 #define int64 int
238 #elif HAVE_LONGLONG
239 #define int64 long long
240 #else
241 #define int64 off_t
242 #define NO_INT64
243 #endif
244
245 #ifndef MIN
246 #define MIN(a,b) ((a)<(b)?(a):(b))
247 #endif
248
249 #ifndef MAX
250 #define MAX(a,b) ((a)>(b)?(a):(b))
251 #endif
252
253 /* the length of the md4 checksum */
254 #define MD4_SUM_LENGTH 16
255 #define SUM_LENGTH 16
256
257 #ifndef MAXPATHLEN
258 #define MAXPATHLEN 1024
259 #endif
260
261 #ifndef INADDR_NONE
262 #define INADDR_NONE 0xffffffff
263 #endif
264
265 struct file_struct {
266         unsigned flags;
267         time_t modtime;
268         OFF_T length;
269         mode_t mode;
270         ino_t inode;
271         dev_t dev;
272         dev_t rdev;
273         uid_t uid;
274         gid_t gid;
275         char *basename;
276         char *dirname;
277         char *basedir;
278         char *link;
279         char *sum;
280 };
281
282 struct file_list {
283   int count;
284   int malloced;
285   struct file_struct **files;
286 };
287
288 struct sum_buf {
289   OFF_T offset;                 /* offset in file of this chunk */
290   int len;                      /* length of chunk of file */
291   int i;                        /* index of this chunk */
292   uint32 sum1;                  /* simple checksum */
293   char sum2[SUM_LENGTH];        /* checksum  */
294 };
295
296 struct sum_struct {
297   OFF_T flength;                /* total file length */
298   int count;                    /* how many chunks */
299   int remainder;                /* flength % block_length */
300   int n;                        /* block_length */
301   struct sum_buf *sums;         /* points to info for each chunk */
302 };
303
304 struct map_struct {
305         char *map,*p;
306         int fd,p_size,p_len;
307         OFF_T size, p_offset;
308 };
309
310 /* we need this function because of the silly way in which duplicate
311    entries are handled in the file lists - we can't change this
312    without breaking existing versions */
313 static inline int flist_up(struct file_list *flist, int i)
314 {
315         while (!flist->files[i]->basename) i++;
316         return i;
317 }
318
319 #if HAVE_DIRENT_H
320 # include <dirent.h>
321 #else
322 # define dirent direct
323 # if HAVE_SYS_NDIR_H
324 #  include <sys/ndir.h>
325 # endif
326 # if HAVE_SYS_DIR_H
327 #  include <sys/dir.h>
328 # endif
329 # if HAVE_NDIR_H
330 #  include <ndir.h>
331 # endif
332 #endif
333
334 #include "byteorder.h"
335 #include "version.h"
336 #include "proto.h"
337 #include "md4.h"
338
339 #if !HAVE_STRERROR
340 extern char *sys_errlist[];
341 #define strerror(i) sys_errlist[i]
342 #endif
343
344 #ifndef HAVE_STRCHR
345 # define strchr                 index
346 # define strrchr                rindex
347 #endif
348
349 #ifndef HAVE_ERRNO_DECL
350 extern int errno;
351 #endif
352
353 #ifndef HAVE_BCOPY
354 #define bcopy(src,dest,n) memcpy(dest,src,n)
355 #endif
356
357 #ifndef HAVE_BZERO
358 #define bzero(buf,n) memset(buf,0,n)
359 #endif
360
361 #define SUPPORT_LINKS HAVE_READLINK
362 #define SUPPORT_HARD_LINKS HAVE_LINK
363
364 #ifndef HAVE_LCHOWN
365 #define lchown chown
366 #endif
367
368 #define SIGNAL_CAST (RETSIGTYPE (*)())
369
370 #ifndef EWOULDBLOCK
371 #define EWOULDBLOCK EAGAIN
372 #endif
373
374 #ifndef STDIN_FILENO
375 #define STDIN_FILENO 0
376 #endif
377
378 #ifndef STDOUT_FILENO
379 #define STDOUT_FILENO 1
380 #endif
381
382 #ifndef STDERR_FILENO
383 #define STDERR_FILENO 2
384 #endif
385
386 #ifndef S_IWUSR
387 #define S_IWUSR 0200
388 #endif
389
390 #ifndef S_ISBLK
391 #define S_ISBLK(mode) (((mode) & (_S_IFMT)) == (_S_IFBLK))
392 #endif
393
394 #ifndef S_ISCHR
395 #define S_ISCHR(mode) (((mode) & (_S_IFMT)) == (_S_IFCHR))
396 #endif
397
398 #ifndef S_ISSOCK
399 #ifdef _S_IFSOCK
400 #define S_ISSOCK(mode) (((mode) & (_S_IFMT)) == (_S_IFSOCK))
401 #else
402 #define S_ISSOCK(mode) (0)
403 #endif
404 #endif
405
406 #ifndef S_ISFIFO
407 #ifdef _S_IFIFO
408 #define S_ISFIFO(mode) (((mode) & (_S_IFMT)) == (_S_IFIFO))
409 #else
410 #define S_ISFIFO(mode) (0)
411 #endif
412 #endif
413
414 #ifndef S_ISDIR
415 #define S_ISDIR(mode) (((mode) & (_S_IFMT)) == (_S_IFDIR))
416 #endif
417
418 #ifndef S_ISREG
419 #define S_ISREG(mode) (((mode) & (_S_IFMT)) == (_S_IFREG))
420 #endif
421
422
423 #define IS_DEVICE(mode) (S_ISCHR(mode) || S_ISBLK(mode) || S_ISSOCK(mode) || S_ISFIFO(mode))
424