this is a large commit which adds io multiplexing, thus giving error
[rsync/rsync.git] / rsync.h
1 /* 
2    Copyright (C) Andrew Tridgell 1996
3    Copyright (C) Paul Mackerras 1996
4    
5    This program is free software; you can redistribute it and/or modify
6    it under the terms of the GNU General Public License as published by
7    the Free Software Foundation; either version 2 of the License, or
8    (at your option) any later version.
9    
10    This program is distributed in the hope that it will be useful,
11    but WITHOUT ANY WARRANTY; without even the implied warranty of
12    MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
13    GNU General Public License for more details.
14    
15    You should have received a copy of the GNU General Public License
16    along with this program; if not, write to the Free Software
17    Foundation, Inc., 675 Mass Ave, Cambridge, MA 02139, USA.
18 */
19
20 #define BLOCK_SIZE 700
21 #define RSYNC_RSH_ENV "RSYNC_RSH"
22
23 #define RSYNC_NAME "rsync"
24 #define RSYNCD_CONF "/etc/rsyncd.conf"
25
26 #define BACKUP_SUFFIX "~"
27
28 /* a non-zero CHAR_OFFSET makes the rolling sum stronger, but is
29    imcompatible with older versions :-( */
30 #define CHAR_OFFSET 0
31
32
33 #define FLAG_DELETE (1<<0)
34 #define SAME_MODE (1<<1)
35 #define SAME_RDEV (1<<2)
36 #define SAME_UID (1<<3)
37 #define SAME_GID (1<<4)
38 #define SAME_DIR (1<<5)
39 #define SAME_NAME SAME_DIR
40 #define LONG_NAME (1<<6)
41 #define SAME_TIME (1<<7)
42
43 /* update this if you make incompatible changes */
44 #define PROTOCOL_VERSION 18
45 #define MIN_PROTOCOL_VERSION 11
46 #define MAX_PROTOCOL_VERSION 30
47
48 #define RSYNC_PORT 873
49
50 #define SPARSE_WRITE_SIZE (1024)
51 #define WRITE_SIZE (32*1024)
52 #define CHUNK_SIZE (32*1024)
53 #define MAX_MAP_SIZE (4*1024*1024)
54 #define IO_BUFFER_SIZE (4096)
55 #define MAX_READ_BUFFER (1024*1024)
56
57 #define MAX_ARGS 1000
58
59 #define BLOCKING_TIMEOUT 10
60
61 #define MPLEX_BASE 7
62 #define FERROR 1
63 #define FINFO 2
64
65 #include "config.h"
66
67 #if HAVE_REMSH
68 #define RSYNC_RSH "remsh"
69 #else
70 #define RSYNC_RSH "rsh"
71 #endif
72
73 #include <sys/types.h>
74 #ifdef HAVE_UNISTD_H
75 #include <unistd.h>
76 #endif
77 #include <stdio.h>
78 #include <stddef.h>
79
80 #ifdef HAVE_SYS_PARAM_H
81 #include <sys/param.h>
82 #endif
83
84 #ifdef HAVE_STDLIB_H
85 #include <stdlib.h>
86 #endif
87
88 #ifdef HAVE_SYS_SOCKET_H
89 #include <sys/socket.h>
90 #endif
91
92 #ifdef HAVE_STRING_H
93 #include <string.h>
94 #endif
95
96 #ifdef HAVE_COMPAT_H
97 #include <compat.h>
98 #endif
99
100 #ifdef HAVE_MALLOC_H
101 #include <malloc.h>
102 #endif
103
104 #ifdef TIME_WITH_SYS_TIME
105 #include <sys/time.h>
106 #include <time.h>
107 #else
108 #ifdef HAVE_SYS_TIME_H
109 #include <sys/time.h>
110 #else
111 #include <time.h>
112 #endif
113 #endif
114
115 #ifdef HAVE_FCNTL_H
116 #include <fcntl.h>
117 #else
118 #ifdef HAVE_SYS_FCNTL_H
119 #include <sys/fcntl.h>
120 #endif
121 #endif
122
123 #include <sys/stat.h>
124
125 #ifdef HAVE_SYS_IOCTL_H
126 #include <sys/ioctl.h>
127 #endif
128
129 #ifdef HAVE_SYS_FILIO_H
130 #include <sys/filio.h>
131 #endif
132
133 #include <signal.h>
134 #ifdef HAVE_SYS_WAIT_H
135 #include <sys/wait.h>
136 #endif
137 #ifdef HAVE_CTYPE_H
138 #include <ctype.h>
139 #endif
140 #ifdef HAVE_GRP_H
141 #include <grp.h>
142 #endif
143 #include <errno.h>
144
145 #ifdef HAVE_MMAP
146 #include <sys/mman.h>
147 #endif
148
149 #ifdef HAVE_UTIME_H
150 #include <utime.h>
151 #endif
152
153 #ifdef HAVE_SYS_SELECT_H
154 #include <sys/select.h>
155 #endif
156
157 #ifdef HAVE_SYS_MODE_H
158 /* apparently AIX needs this for S_ISLNK */
159 #ifndef S_ISLNK
160 #include <sys/mode.h>
161 #endif
162 #endif
163
164 #ifdef HAVE_FNMATCH
165 #include <fnmatch.h>
166 #else
167 #include "lib/fnmatch.h"
168 #endif
169
170 #ifdef HAVE_GETOPT_LONG
171 #include <getopt.h>
172 #else
173 #include "lib/getopt.h"
174 #endif
175
176 #ifdef HAVE_GLOB
177 #include <glob.h>
178 #endif
179
180 /* these are needed for the uid/gid mapping code */
181 #include <pwd.h>
182 #include <grp.h>
183
184 #include <stdarg.h>
185 #include <netinet/in.h>
186 #include <arpa/inet.h>
187 #include <netdb.h>
188 #include <syslog.h>
189 #include <sys/file.h>
190
191 #ifndef S_IFLNK
192 #define S_IFLNK  0120000
193 #endif
194
195 #ifndef S_ISLNK
196 #define S_ISLNK(mode) (((mode) & S_IFLNK) == S_IFLNK)
197 #endif
198
199 #define BOOL int
200
201 #ifndef uchar
202 #define uchar unsigned char
203 #endif
204
205 #if HAVE_UNSIGNED_CHAR
206 #define schar signed char
207 #else
208 #define schar char
209 #endif
210
211 #ifndef int32
212 #if (SIZEOF_INT == 4)
213 #define int32 int
214 #elif (SIZEOF_LONG == 4)
215 #define int32 long
216 #elif (SIZEOF_SHORT == 4)
217 #define int32 short
218 #endif
219 #endif
220
221 #ifndef uint32
222 #define uint32 unsigned int32
223 #endif
224
225 #if HAVE_OFF64_T
226 #define OFF_T off64_t
227 #define STRUCT_STAT struct stat64
228 #else
229 #define OFF_T off_t
230 #define STRUCT_STAT struct stat
231 #endif
232
233 #if HAVE_OFF64_T
234 #define int64 off64_t
235 #elif (SIZEOF_LONG == 8) 
236 #define int64 long
237 #elif (SIZEOF_INT == 8) 
238 #define int64 int
239 #elif HAVE_LONGLONG
240 #define int64 long long
241 #else
242 #define int64 off_t
243 #define NO_INT64
244 #endif
245
246 #ifndef MIN
247 #define MIN(a,b) ((a)<(b)?(a):(b))
248 #endif
249
250 #ifndef MAX
251 #define MAX(a,b) ((a)>(b)?(a):(b))
252 #endif
253
254 /* the length of the md4 checksum */
255 #define MD4_SUM_LENGTH 16
256 #define SUM_LENGTH 16
257
258 #ifndef MAXPATHLEN
259 #define MAXPATHLEN 1024
260 #endif
261
262 #ifndef INADDR_NONE
263 #define INADDR_NONE 0xffffffff
264 #endif
265
266 struct file_struct {
267         unsigned flags;
268         time_t modtime;
269         OFF_T length;
270         mode_t mode;
271         ino_t inode;
272         dev_t dev;
273         dev_t rdev;
274         uid_t uid;
275         gid_t gid;
276         char *basename;
277         char *dirname;
278         char *basedir;
279         char *link;
280         char *sum;
281 };
282
283 struct file_list {
284   int count;
285   int malloced;
286   struct file_struct **files;
287 };
288
289 struct sum_buf {
290   OFF_T offset;                 /* offset in file of this chunk */
291   int len;                      /* length of chunk of file */
292   int i;                        /* index of this chunk */
293   uint32 sum1;                  /* simple checksum */
294   char sum2[SUM_LENGTH];        /* checksum  */
295 };
296
297 struct sum_struct {
298   OFF_T flength;                /* total file length */
299   int count;                    /* how many chunks */
300   int remainder;                /* flength % block_length */
301   int n;                        /* block_length */
302   struct sum_buf *sums;         /* points to info for each chunk */
303 };
304
305 struct map_struct {
306         char *map,*p;
307         int fd,p_size,p_len;
308         OFF_T size, p_offset;
309 };
310
311 /* we need this function because of the silly way in which duplicate
312    entries are handled in the file lists - we can't change this
313    without breaking existing versions */
314 static inline int flist_up(struct file_list *flist, int i)
315 {
316         while (!flist->files[i]->basename) i++;
317         return i;
318 }
319
320 #if HAVE_DIRENT_H
321 # include <dirent.h>
322 #else
323 # define dirent direct
324 # if HAVE_SYS_NDIR_H
325 #  include <sys/ndir.h>
326 # endif
327 # if HAVE_SYS_DIR_H
328 #  include <sys/dir.h>
329 # endif
330 # if HAVE_NDIR_H
331 #  include <ndir.h>
332 # endif
333 #endif
334
335 #include "byteorder.h"
336 #include "version.h"
337 #include "proto.h"
338 #include "md4.h"
339
340 #if !HAVE_STRERROR
341 extern char *sys_errlist[];
342 #define strerror(i) sys_errlist[i]
343 #endif
344
345 #ifndef HAVE_STRCHR
346 # define strchr                 index
347 # define strrchr                rindex
348 #endif
349
350 #ifndef HAVE_ERRNO_DECL
351 extern int errno;
352 #endif
353
354 #ifndef HAVE_BCOPY
355 #define bcopy(src,dest,n) memcpy(dest,src,n)
356 #endif
357
358 #ifndef HAVE_BZERO
359 #define bzero(buf,n) memset(buf,0,n)
360 #endif
361
362 #define SUPPORT_LINKS HAVE_READLINK
363 #define SUPPORT_HARD_LINKS HAVE_LINK
364
365 #ifndef HAVE_LCHOWN
366 #define lchown chown
367 #endif
368
369 #define SIGNAL_CAST (RETSIGTYPE (*)())
370
371 #ifndef EWOULDBLOCK
372 #define EWOULDBLOCK EAGAIN
373 #endif
374
375 #ifndef STDIN_FILENO
376 #define STDIN_FILENO 0
377 #endif
378
379 #ifndef STDOUT_FILENO
380 #define STDOUT_FILENO 1
381 #endif
382
383 #ifndef STDERR_FILENO
384 #define STDERR_FILENO 2
385 #endif
386
387 #ifndef S_IWUSR
388 #define S_IWUSR 0200
389 #endif
390
391 #ifndef S_ISBLK
392 #define S_ISBLK(mode) (((mode) & (_S_IFMT)) == (_S_IFBLK))
393 #endif
394
395 #ifndef S_ISCHR
396 #define S_ISCHR(mode) (((mode) & (_S_IFMT)) == (_S_IFCHR))
397 #endif
398
399 #ifndef S_ISSOCK
400 #ifdef _S_IFSOCK
401 #define S_ISSOCK(mode) (((mode) & (_S_IFMT)) == (_S_IFSOCK))
402 #else
403 #define S_ISSOCK(mode) (0)
404 #endif
405 #endif
406
407 #ifndef S_ISFIFO
408 #ifdef _S_IFIFO
409 #define S_ISFIFO(mode) (((mode) & (_S_IFMT)) == (_S_IFIFO))
410 #else
411 #define S_ISFIFO(mode) (0)
412 #endif
413 #endif
414
415 #ifndef S_ISDIR
416 #define S_ISDIR(mode) (((mode) & (_S_IFMT)) == (_S_IFDIR))
417 #endif
418
419 #ifndef S_ISREG
420 #define S_ISREG(mode) (((mode) & (_S_IFMT)) == (_S_IFREG))
421 #endif
422
423
424 #define IS_DEVICE(mode) (S_ISCHR(mode) || S_ISBLK(mode) || S_ISSOCK(mode) || S_ISFIFO(mode))
425