rsync.h

   1 /*
   2    Copyright (C) Andrew Tridgell 1996
   3    Copyright (C) Paul Mackerras 1996
   4
   5    This program is free software; you can redistribute it and/or modify
   6    it under the terms of the GNU General Public License as published by
   7    the Free Software Foundation; either version 2 of the License, or
   8    (at your option) any later version.
   9
  10    This program is distributed in the hope that it will be useful,
  11    but WITHOUT ANY WARRANTY; without even the implied warranty of
  12    MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
  13    GNU General Public License for more details.
  14
  15    You should have received a copy of the GNU General Public License
  16    along with this program; if not, write to the Free Software
  17    Foundation, Inc., 675 Mass Ave, Cambridge, MA 02139, USA.
  18 */
  19
  20 #define BLOCK_SIZE 700
  21 #define RSYNC_RSH_ENV "RSYNC_RSH"
  22
  23 #define RSYNC_NAME "rsync"
  24 #define RSYNCD_CONF "/etc/rsyncd.conf"
  25
  26 #define BACKUP_SUFFIX "~"
  27
  28 /* a non-zero CHAR_OFFSET makes the rolling sum stronger, but is
  29    imcompatible with older versions :-( */
  30 #define CHAR_OFFSET 0
  31
  32
  33 #define FLAG_DELETE (1<<0)
  34 #define SAME_MODE (1<<1)
  35 #define SAME_RDEV (1<<2)
  36 #define SAME_UID (1<<3)
  37 #define SAME_GID (1<<4)
  38 #define SAME_DIR (1<<5)
  39 #define SAME_NAME SAME_DIR
  40 #define LONG_NAME (1<<6)
  41 #define SAME_TIME (1<<7)
  42
  43 /* update this if you make incompatible changes */
  44 #define PROTOCOL_VERSION 19
  45 #define MIN_PROTOCOL_VERSION 11
  46 #define MAX_PROTOCOL_VERSION 30
  47
  48 #define RSYNC_PORT 873
  49
  50 #define SPARSE_WRITE_SIZE (1024)
  51 #define WRITE_SIZE (32*1024)
  52 #define CHUNK_SIZE (32*1024)
  53 #define MAX_MAP_SIZE (1*1024*1024)
  54 #define IO_BUFFER_SIZE (4092)
  55 #define MAX_READ_BUFFER (1024*1024)
  56
  57 #define MAX_ARGS 1000
  58
  59 #define MPLEX_BASE 7
  60 #define FERROR 1
  61 #define FINFO 2
  62
  63 #include "config.h"
  64
  65 #if HAVE_REMSH
  66 #define RSYNC_RSH "remsh"
  67 #else
  68 #define RSYNC_RSH "rsh"
  69 #endif
  70
  71 #include <sys/types.h>
  72 #ifdef HAVE_UNISTD_H
  73 #include <unistd.h>
  74 #endif
  75 #include <stdio.h>
  76 #include <stddef.h>
  77
  78 #ifdef HAVE_SYS_PARAM_H
  79 #include <sys/param.h>
  80 #endif
  81
  82 #ifdef HAVE_STDLIB_H
  83 #include <stdlib.h>
  84 #endif
  85
  86 #ifdef HAVE_SYS_SOCKET_H
  87 #include <sys/socket.h>
  88 #endif
  89
  90 #ifdef HAVE_STRING_H
  91 #include <string.h>
  92 #endif
  93
  94 #ifdef HAVE_COMPAT_H
  95 #include <compat.h>
  96 #endif
  97
  98 #ifdef HAVE_MALLOC_H
  99 #include <malloc.h>
 100 #endif
 101
 102 #ifdef TIME_WITH_SYS_TIME
 103 #include <sys/time.h>
 104 #include <time.h>
 105 #else
 106 #ifdef HAVE_SYS_TIME_H
 107 #include <sys/time.h>
 108 #else
 109 #include <time.h>
 110 #endif
 111 #endif
 112
 113 #ifdef HAVE_FCNTL_H
 114 #include <fcntl.h>
 115 #else
 116 #ifdef HAVE_SYS_FCNTL_H
 117 #include <sys/fcntl.h>
 118 #endif
 119 #endif
 120
 121 #include <sys/stat.h>
 122
 123 #ifdef HAVE_SYS_IOCTL_H
 124 #include <sys/ioctl.h>
 125 #endif
 126
 127 #ifdef HAVE_SYS_FILIO_H
 128 #include <sys/filio.h>
 129 #endif
 130
 131 #include <signal.h>
 132 #ifdef HAVE_SYS_WAIT_H
 133 #include <sys/wait.h>
 134 #endif
 135 #ifdef HAVE_CTYPE_H
 136 #include <ctype.h>
 137 #endif
 138 #ifdef HAVE_GRP_H
 139 #include <grp.h>
 140 #endif
 141 #include <errno.h>
 142
 143 #if defined(HAVE_MMAP) && defined(HAVE_MUNMAP)
 144 #include <sys/mman.h>
 145 #define USE_MMAP 1
 146 #endif
 147
 148 #ifdef HAVE_UTIME_H
 149 #include <utime.h>
 150 #endif
 151
 152 #ifdef HAVE_SYS_SELECT_H
 153 #include <sys/select.h>
 154 #endif
 155
 156 #ifdef HAVE_SYS_MODE_H
 157 /* apparently AIX needs this for S_ISLNK */
 158 #ifndef S_ISLNK
 159 #include <sys/mode.h>
 160 #endif
 161 #endif
 162
 163 #ifdef HAVE_FNMATCH
 164 #include <fnmatch.h>
 165 #else
 166 #include "lib/fnmatch.h"
 167 #endif
 168
 169 #ifdef HAVE_GETOPT_LONG
 170 #include <getopt.h>
 171 #else
 172 #include "lib/getopt.h"
 173 #endif
 174
 175 #ifdef HAVE_GLOB
 176 #include <glob.h>
 177 #endif
 178
 179 /* these are needed for the uid/gid mapping code */
 180 #include <pwd.h>
 181 #include <grp.h>
 182
 183 #include <stdarg.h>
 184 #include <netinet/in.h>
 185 #include <arpa/inet.h>
 186 #include <netdb.h>
 187 #include <syslog.h>
 188 #include <sys/file.h>
 189
 190 #ifndef S_IFLNK
 191 #define S_IFLNK  0120000
 192 #endif
 193
 194 #ifndef S_ISLNK
 195 #define S_ISLNK(mode) (((mode) & S_IFLNK) == S_IFLNK)
 196 #endif
 197
 198 #define BOOL int
 199
 200 #ifndef uchar
 201 #define uchar unsigned char
 202 #endif
 203
 204 #if HAVE_UNSIGNED_CHAR
 205 #define schar signed char
 206 #else
 207 #define schar char
 208 #endif
 209
 210 #ifndef int32
 211 #if (SIZEOF_INT == 4)
 212 #define int32 int
 213 #elif (SIZEOF_LONG == 4)
 214 #define int32 long
 215 #elif (SIZEOF_SHORT == 4)
 216 #define int32 short
 217 #endif
 218 #endif
 219
 220 #ifndef uint32
 221 #define uint32 unsigned int32
 222 #endif
 223
 224 #if HAVE_OFF64_T
 225 #define OFF_T off64_t
 226 #define STRUCT_STAT struct stat64
 227 #else
 228 #define OFF_T off_t
 229 #define STRUCT_STAT struct stat
 230 #endif
 231
 232 #if HAVE_OFF64_T
 233 #define int64 off64_t
 234 #elif (SIZEOF_LONG == 8)
 235 #define int64 long
 236 #elif (SIZEOF_INT == 8)
 237 #define int64 int
 238 #elif HAVE_LONGLONG
 239 #define int64 long long
 240 #else
 241 #define int64 off_t
 242 #define NO_INT64
 243 #endif
 244
 245 #ifndef MIN
 246 #define MIN(a,b) ((a)<(b)?(a):(b))
 247 #endif
 248
 249 #ifndef MAX
 250 #define MAX(a,b) ((a)>(b)?(a):(b))
 251 #endif
 252
 253 /* the length of the md4 checksum */
 254 #define MD4_SUM_LENGTH 16
 255 #define SUM_LENGTH 16
 256
 257 #ifndef MAXPATHLEN
 258 #define MAXPATHLEN 1024
 259 #endif
 260
 261 #ifndef INADDR_NONE
 262 #define INADDR_NONE 0xffffffff
 263 #endif
 264
 265 struct file_struct {
 266         unsigned flags;
 267         time_t modtime;
 268         OFF_T length;
 269         mode_t mode;
 270         ino_t inode;
 271         dev_t dev;
 272         dev_t rdev;
 273         uid_t uid;
 274         gid_t gid;
 275         char *basename;
 276         char *dirname;
 277         char *basedir;
 278         char *link;
 279         char *sum;
 280 };
 281
 282 struct file_list {
 283         int count;
 284         int malloced;
 285         struct file_struct **files;
 286 };
 287
 288 struct sum_buf {
 289   OFF_T offset;                 /* offset in file of this chunk */
 290   int len;                      /* length of chunk of file */
 291   int i;                        /* index of this chunk */
 292   uint32 sum1;                  /* simple checksum */
 293   char sum2[SUM_LENGTH];        /* checksum  */
 294 };
 295
 296 struct sum_struct {
 297   OFF_T flength;                /* total file length */
 298   int count;                    /* how many chunks */
 299   int remainder;                /* flength % block_length */
 300   int n;                        /* block_length */
 301   struct sum_buf *sums;         /* points to info for each chunk */
 302 };
 303
 304 struct map_struct {
 305         char *map,*p;
 306         int fd,p_size,p_len;
 307         OFF_T size, p_offset;
 308 };
 309
 310 struct exclude_struct {
 311         char *orig;
 312         char *pattern;
 313         int regular_exp;
 314         int include;
 315         int directory;
 316         int local;
 317 };
 318
 319 struct stats {
 320         int64 total_size;
 321         int64 total_transferred_size;
 322         int64 total_written;
 323         int64 total_read;
 324         int64 literal_data;
 325         int64 matched_data;
 326         int flist_size;
 327         int num_files;
 328         int num_transferred_files;
 329 };
 330
 331
 332 /* we need this function because of the silly way in which duplicate
 333    entries are handled in the file lists - we can't change this
 334    without breaking existing versions */
 335 static inline int flist_up(struct file_list *flist, int i)
 336 {
 337         while (!flist->files[i]->basename) i++;
 338         return i;
 339 }
 340
 341 #if HAVE_DIRENT_H
 342 # include <dirent.h>
 343 #else
 344 # define dirent direct
 345 # if HAVE_SYS_NDIR_H
 346 #  include <sys/ndir.h>
 347 # endif
 348 # if HAVE_SYS_DIR_H
 349 #  include <sys/dir.h>
 350 # endif
 351 # if HAVE_NDIR_H
 352 #  include <ndir.h>
 353 # endif
 354 #endif
 355
 356 #include "byteorder.h"
 357 #include "version.h"
 358 #include "proto.h"
 359 #include "md4.h"
 360
 361 #if !HAVE_STRERROR
 362 extern char *sys_errlist[];
 363 #define strerror(i) sys_errlist[i]
 364 #endif
 365
 366 #ifndef HAVE_STRCHR
 367 # define strchr                 index
 368 # define strrchr                rindex
 369 #endif
 370
 371 #ifndef HAVE_ERRNO_DECL
 372 extern int errno;
 373 #endif
 374
 375 #ifndef HAVE_BCOPY
 376 #define bcopy(src,dest,n) memcpy(dest,src,n)
 377 #endif
 378
 379 #ifndef HAVE_BZERO
 380 #define bzero(buf,n) memset(buf,0,n)
 381 #endif
 382
 383 #define SUPPORT_LINKS HAVE_READLINK
 384 #define SUPPORT_HARD_LINKS HAVE_LINK
 385
 386 #ifndef HAVE_LCHOWN
 387 #define lchown chown
 388 #endif
 389
 390 #define SIGNAL_CAST (RETSIGTYPE (*)())
 391
 392 #ifndef EWOULDBLOCK
 393 #define EWOULDBLOCK EAGAIN
 394 #endif
 395
 396 #ifndef STDIN_FILENO
 397 #define STDIN_FILENO 0
 398 #endif
 399
 400 #ifndef STDOUT_FILENO
 401 #define STDOUT_FILENO 1
 402 #endif
 403
 404 #ifndef STDERR_FILENO
 405 #define STDERR_FILENO 2
 406 #endif
 407
 408 #ifndef S_IWUSR
 409 #define S_IWUSR 0200
 410 #endif
 411
 412 #ifndef S_ISBLK
 413 #define S_ISBLK(mode) (((mode) & (_S_IFMT)) == (_S_IFBLK))
 414 #endif
 415
 416 #ifndef S_ISCHR
 417 #define S_ISCHR(mode) (((mode) & (_S_IFMT)) == (_S_IFCHR))
 418 #endif
 419
 420 #ifndef S_ISSOCK
 421 #ifdef _S_IFSOCK
 422 #define S_ISSOCK(mode) (((mode) & (_S_IFMT)) == (_S_IFSOCK))
 423 #else
 424 #define S_ISSOCK(mode) (0)
 425 #endif
 426 #endif
 427
 428 #ifndef S_ISFIFO
 429 #ifdef _S_IFIFO
 430 #define S_ISFIFO(mode) (((mode) & (_S_IFMT)) == (_S_IFIFO))
 431 #else
 432 #define S_ISFIFO(mode) (0)
 433 #endif
 434 #endif
 435
 436 #ifndef S_ISDIR
 437 #define S_ISDIR(mode) (((mode) & (_S_IFMT)) == (_S_IFDIR))
 438 #endif
 439
 440 #ifndef S_ISREG
 441 #define S_ISREG(mode) (((mode) & (_S_IFMT)) == (_S_IFREG))
 442 #endif
 443
 444
 445 #define IS_DEVICE(mode) (S_ISCHR(mode) || S_ISBLK(mode) || S_ISSOCK(mode) || S_ISFIFO(mode))
 446