rsync.c

   1 /*
   2  * Routines common to more than one of the rsync processes.
   3  *
   4  * Copyright (C) 1996 Andrew Tridgell
   5  * Copyright (C) 1996 Paul Mackerras
   6  * Copyright (C) 2003-2007 Wayne Davison
   7  *
   8  * This program is free software; you can redistribute it and/or modify
   9  * it under the terms of the GNU General Public License version 2 as
  10  * published by the Free Software Foundation.
  11  *
  12  * This program is distributed in the hope that it will be useful,
  13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
  15  * GNU General Public License for more details.
  16  *
  17  * You should have received a copy of the GNU General Public License along
  18  * with this program; if not, write to the Free Software Foundation, Inc.,
  19  * 51 Franklin Street - Fifth Floor, Boston, MA 02110-1301, USA.
  20  */
  21
  22 #include "rsync.h"
  23 #if defined HAVE_ICONV_OPEN && defined HAVE_ICONV_H
  24 #include <iconv.h>
  25 #endif
  26 #if defined HAVE_LIBCHARSET_H && defined HAVE_LOCALE_CHARSET
  27 #include <libcharset.h>
  28 #elif defined HAVE_LANGINFO_H && defined HAVE_NL_LANGINFO
  29 #include <langinfo.h>
  30 #endif
  31
  32 extern int verbose;
  33 extern int dry_run;
  34 extern int preserve_perms;
  35 extern int preserve_executability;
  36 extern int preserve_times;
  37 extern int omit_dir_times;
  38 extern int am_root;
  39 extern int am_server;
  40 extern int am_sender;
  41 extern int am_generator;
  42 extern int am_starting_up;
  43 extern int allow_8bit_chars;
  44 extern int protocol_version;
  45 extern int preserve_uid;
  46 extern int preserve_gid;
  47 extern int inc_recurse;
  48 extern int inplace;
  49 extern int flist_eof;
  50 extern int keep_dirlinks;
  51 extern int make_backups;
  52 extern mode_t orig_umask;
  53 extern struct file_list *cur_flist, *first_flist, *dir_flist;
  54 extern struct chmod_mode_struct *daemon_chmod_modes;
  55
  56 #if defined HAVE_ICONV_OPEN && defined HAVE_ICONV_H
  57 iconv_t ic_chck = (iconv_t)-1;
  58
  59 static const char *default_charset(void)
  60 {
  61 #if defined HAVE_LIBCHARSET_H && defined HAVE_LOCALE_CHARSET
  62         return locale_charset();
  63 #elif defined HAVE_LANGINFO_H && defined HAVE_NL_LANGINFO
  64         return nl_langinfo(CODESET);
  65 #else
  66         return ""; /* Works with (at the very least) gnu iconv... */
  67 #endif
  68 }
  69
  70 void setup_iconv()
  71 {
  72         if (!am_server && !allow_8bit_chars) {
  73                 const char *defset = default_charset();
  74
  75                 /* It's OK if this fails... */
  76                 ic_chck = iconv_open(defset, defset);
  77
  78                 if (verbose > 3) {
  79                         if (ic_chck == (iconv_t)-1) {
  80                                 rprintf(FINFO,
  81                                         "note: iconv_open(\"%s\", \"%s\") failed (%d)"
  82                                         " -- using isprint() instead of iconv().\n",
  83                                         defset, defset, errno);
  84                         } else {
  85                                 rprintf(FINFO,
  86                                         "note: iconv_open(\"%s\", \"%s\") succeeded.\n",
  87                                         defset, defset);
  88                         }
  89                 }
  90         }
  91 }
  92 #endif
  93
  94 /* This is used by sender.c with a valid f_out, and by receive.c with
  95  * f_out = -1. */
  96 int read_ndx_and_attrs(int f_in, int f_out, int *iflag_ptr,
  97                        uchar *type_ptr, char *buf, int *len_ptr)
  98 {
  99         int len, iflags = 0;
 100         struct file_list *flist;
 101         uchar fnamecmp_type = FNAMECMP_FNAME;
 102         int verbose_save, ndx;
 103
 104   read_loop:
 105         while (1) {
 106                 ndx = read_ndx(f_in);
 107
 108                 if (ndx >= 0)
 109                         break;
 110                 if (ndx == NDX_DONE)
 111                         return ndx;
 112                 if (!inc_recurse || am_sender)
 113                         goto invalid_ndx;
 114                 if (ndx == NDX_FLIST_EOF) {
 115                         flist_eof = 1;
 116                         send_msg(MSG_FLIST_EOF, "", 0);
 117                         continue;
 118                 }
 119                 ndx = NDX_FLIST_OFFSET - ndx;
 120                 if (ndx < 0 || ndx >= dir_flist->count) {
 121                         ndx = NDX_FLIST_OFFSET - ndx;
 122                         rprintf(FERROR,
 123                                 "Invalid dir index: %d (%d - %d)\n",
 124                                 ndx, NDX_FLIST_OFFSET,
 125                                 NDX_FLIST_OFFSET - dir_flist->count);
 126                         exit_cleanup(RERR_PROTOCOL);
 127                 }
 128                 verbose_save = verbose;
 129                 verbose = 0; /* TODO allow verbose messages? */
 130
 131                 /* Send everything read from f_in to msg_fd_out. */
 132                 send_msg_int(MSG_FLIST, ndx);
 133                 start_flist_forward(f_in);
 134                 flist = recv_file_list(f_in);
 135                 flist->parent_ndx = ndx;
 136                 stop_flist_forward();
 137
 138                 verbose = verbose_save;
 139         }
 140
 141         iflags = protocol_version >= 29 ? read_shortint(f_in)
 142                    : ITEM_TRANSFER | ITEM_MISSING_DATA;
 143
 144         /* Honor the old-style keep-alive indicator. */
 145         if (protocol_version < 30
 146          && ndx == cur_flist->count && iflags == ITEM_IS_NEW) {
 147                 if (am_sender)
 148                         maybe_send_keepalive();
 149                 goto read_loop;
 150         }
 151
 152         if (!(flist = flist_for_ndx(ndx))) {
 153           invalid_ndx:
 154                 rprintf(FERROR,
 155                         "Invalid file index: %d (%d - %d) with iflags %x [%s]\n",
 156                         ndx, first_flist->ndx_start + first_flist->ndx_start,
 157                         first_flist->prev->ndx_start + first_flist->ndx_start
 158                         + first_flist->prev->count - 1, iflags, who_am_i());
 159                 exit_cleanup(RERR_PROTOCOL);
 160         }
 161         cur_flist = flist;
 162
 163         if (iflags & ITEM_BASIS_TYPE_FOLLOWS)
 164                 fnamecmp_type = read_byte(f_in);
 165         *type_ptr = fnamecmp_type;
 166
 167         if (iflags & ITEM_XNAME_FOLLOWS) {
 168                 if ((len = read_vstring(f_in, buf, MAXPATHLEN)) < 0)
 169                         exit_cleanup(RERR_PROTOCOL);
 170         } else {
 171                 *buf = '\0';
 172                 len = -1;
 173         }
 174         *len_ptr = len;
 175
 176         if (iflags & ITEM_TRANSFER) {
 177                 int i = ndx - cur_flist->ndx_start;
 178                 if (!S_ISREG(cur_flist->files[i]->mode)) {
 179                         rprintf(FERROR,
 180                                 "received request to transfer non-regular file: %d [%s]\n",
 181                                 ndx, who_am_i());
 182                         exit_cleanup(RERR_PROTOCOL);
 183                 }
 184         } else if (f_out >= 0) {
 185                 if (inc_recurse)
 186                         send_extra_file_list(f_out, FILECNT_LOOKAHEAD);
 187                 write_ndx_and_attrs(f_out, ndx, iflags,
 188                                     fnamecmp_type, buf, len);
 189         }
 190
 191         *iflag_ptr = iflags;
 192         return ndx;
 193 }
 194
 195 /*
 196   free a sums struct
 197   */
 198 void free_sums(struct sum_struct *s)
 199 {
 200         if (s->sums) free(s->sums);
 201         free(s);
 202 }
 203
 204 /* This is only called when we aren't preserving permissions.  Figure out what
 205  * the permissions should be and return them merged back into the mode. */
 206 mode_t dest_mode(mode_t flist_mode, mode_t stat_mode, int exists)
 207 {
 208         int new_mode;
 209         /* If the file already exists, we'll return the local permissions,
 210          * possibly tweaked by the --executability option. */
 211         if (exists) {
 212                 new_mode = (flist_mode & ~CHMOD_BITS) | (stat_mode & CHMOD_BITS);
 213                 if (preserve_executability && S_ISREG(flist_mode)) {
 214                         /* If the source file is executable, grant execute
 215                          * rights to everyone who can read, but ONLY if the
 216                          * file isn't already executable. */
 217                         if (!(flist_mode & 0111))
 218                                 new_mode &= ~0111;
 219                         else if (!(stat_mode & 0111))
 220                                 new_mode |= (new_mode & 0444) >> 2;
 221                 }
 222         } else {
 223                 /* Apply the umask and turn off special permissions. */
 224                 new_mode = flist_mode & (~CHMOD_BITS | (ACCESSPERMS & ~orig_umask));
 225         }
 226         return new_mode;
 227 }
 228
 229 int set_file_attrs(char *fname, struct file_struct *file, STRUCT_STAT *st,
 230                    int flags)
 231 {
 232         int updated = 0;
 233         STRUCT_STAT st2;
 234         int change_uid, change_gid;
 235         mode_t new_mode = file->mode;
 236
 237         if (!st) {
 238                 if (dry_run)
 239                         return 1;
 240                 if (link_stat(fname, &st2, 0) < 0) {
 241                         rsyserr(FERROR, errno, "stat %s failed",
 242                                 full_fname(fname));
 243                         return 0;
 244                 }
 245                 st = &st2;
 246                 if (!preserve_perms && S_ISDIR(new_mode)
 247                  && st->st_mode & S_ISGID) {
 248                         /* We just created this directory and its setgid
 249                          * bit is on, so make sure it stays on. */
 250                         new_mode |= S_ISGID;
 251                 }
 252         }
 253
 254         if (!preserve_times || (S_ISDIR(st->st_mode) && omit_dir_times))
 255                 flags |= ATTRS_SKIP_MTIME;
 256         if (!(flags & ATTRS_SKIP_MTIME)
 257             && cmp_time(st->st_mtime, file->modtime) != 0) {
 258                 int ret = set_modtime(fname, file->modtime, st->st_mode);
 259                 if (ret < 0) {
 260                         rsyserr(FERROR, errno, "failed to set times on %s",
 261                                 full_fname(fname));
 262                         return 0;
 263                 }
 264                 if (ret == 0) /* ret == 1 if symlink could not be set */
 265                         updated = 1;
 266         }
 267
 268         change_uid = am_root && preserve_uid && st->st_uid != F_UID(file);
 269         change_gid = preserve_gid && F_GID(file) != GID_NONE
 270                 && st->st_gid != F_GID(file);
 271 #if !defined HAVE_LCHOWN && !defined CHOWN_MODIFIES_SYMLINK
 272         if (S_ISLNK(st->st_mode))
 273                 ;
 274         else
 275 #endif
 276         if (change_uid || change_gid) {
 277                 if (verbose > 2) {
 278                         if (change_uid) {
 279                                 rprintf(FINFO,
 280                                         "set uid of %s from %ld to %ld\n",
 281                                         fname,
 282                                         (long)st->st_uid, (long)F_UID(file));
 283                         }
 284                         if (change_gid) {
 285                                 rprintf(FINFO,
 286                                         "set gid of %s from %ld to %ld\n",
 287                                         fname,
 288                                         (long)st->st_gid, (long)F_GID(file));
 289                         }
 290                 }
 291                 if (do_lchown(fname,
 292                     change_uid ? F_UID(file) : st->st_uid,
 293                     change_gid ? F_GID(file) : st->st_gid) != 0) {
 294                         /* shouldn't have attempted to change uid or gid
 295                          * unless have the privilege */
 296                         rsyserr(FERROR, errno, "%s %s failed",
 297                             change_uid ? "chown" : "chgrp",
 298                             full_fname(fname));
 299                         return 0;
 300                 }
 301                 /* a lchown had been done - we have to re-stat if the
 302                  * destination had the setuid or setgid bits set due
 303                  * to the side effect of the chown call */
 304                 if (st->st_mode & (S_ISUID | S_ISGID)) {
 305                         link_stat(fname, st,
 306                                   keep_dirlinks && S_ISDIR(st->st_mode));
 307                 }
 308                 updated = 1;
 309         }
 310
 311         if (daemon_chmod_modes && !S_ISLNK(new_mode))
 312                 new_mode = tweak_mode(new_mode, daemon_chmod_modes);
 313 #ifdef HAVE_CHMOD
 314         if (!BITS_EQUAL(st->st_mode, new_mode, CHMOD_BITS)) {
 315                 int ret = do_chmod(fname, new_mode);
 316                 if (ret < 0) {
 317                         rsyserr(FERROR, errno,
 318                                 "failed to set permissions on %s",
 319                                 full_fname(fname));
 320                         return 0;
 321                 }
 322                 if (ret == 0) /* ret == 1 if symlink could not be set */
 323                         updated = 1;
 324         }
 325 #endif
 326
 327         if (verbose > 1 && flags & ATTRS_REPORT) {
 328                 if (updated)
 329                         rprintf(FCLIENT, "%s\n", fname);
 330                 else
 331                         rprintf(FCLIENT, "%s is uptodate\n", fname);
 332         }
 333         return updated;
 334 }
 335
 336 RETSIGTYPE sig_int(UNUSED(int val))
 337 {
 338         /* KLUGE: if the user hits Ctrl-C while ssh is prompting
 339          * for a password, then our cleanup's sending of a SIGUSR1
 340          * signal to all our children may kill ssh before it has a
 341          * chance to restore the tty settings (i.e. turn echo back
 342          * on).  By sleeping for a short time, ssh gets a bigger
 343          * chance to do the right thing.  If child processes are
 344          * not ssh waiting for a password, then this tiny delay
 345          * shouldn't hurt anything. */
 346         msleep(400);
 347         exit_cleanup(RERR_SIGNAL);
 348 }
 349
 350 /* Finish off a file transfer: renaming the file and setting the file's
 351  * attributes (e.g. permissions, ownership, etc.).  If partialptr is not
 352  * NULL and the robust_rename() call is forced to copy the temp file, we
 353  * stage the file into the partial-dir and then rename it into place. */
 354 void finish_transfer(char *fname, char *fnametmp, char *partialptr,
 355                      struct file_struct *file, int ok_to_set_time,
 356                      int overwriting_basis)
 357 {
 358         int ret;
 359
 360         if (inplace) {
 361                 if (verbose > 2)
 362                         rprintf(FINFO, "finishing %s\n", fname);
 363                 fnametmp = fname;
 364                 goto do_set_file_attrs;
 365         }
 366
 367         if (make_backups > 0 && overwriting_basis && !make_backup(fname))
 368                 return;
 369
 370         /* Change permissions before putting the file into place. */
 371         set_file_attrs(fnametmp, file, NULL,
 372                        ok_to_set_time ? 0 : ATTRS_SKIP_MTIME);
 373
 374         /* move tmp file over real file */
 375         if (verbose > 2)
 376                 rprintf(FINFO, "renaming %s to %s\n", fnametmp, fname);
 377         ret = robust_rename(fnametmp, fname, partialptr,
 378                             file->mode & INITACCESSPERMS);
 379         if (ret < 0) {
 380                 rsyserr(FERROR, errno, "%s %s -> \"%s\"",
 381                         ret == -2 ? "copy" : "rename",
 382                         full_fname(fnametmp), fname);
 383                 do_unlink(fnametmp);
 384                 return;
 385         }
 386         if (ret == 0) {
 387                 /* The file was moved into place (not copied), so it's done. */
 388                 return;
 389         }
 390         /* The file was copied, so tweak the perms of the copied file.  If it
 391          * was copied to partialptr, move it into its final destination. */
 392         fnametmp = partialptr ? partialptr : fname;
 393
 394   do_set_file_attrs:
 395         set_file_attrs(fnametmp, file, NULL,
 396                        ok_to_set_time ? 0 : ATTRS_SKIP_MTIME);
 397
 398         if (partialptr) {
 399                 if (do_rename(fnametmp, fname) < 0) {
 400                         rsyserr(FERROR, errno, "rename %s -> \"%s\"",
 401                                 full_fname(fnametmp), fname);
 402                 } else
 403                         handle_partial_dir(partialptr, PDIR_DELETE);
 404         }
 405 }
 406
 407 struct file_list *flist_for_ndx(int ndx)
 408 {
 409         struct file_list *flist = cur_flist;
 410
 411         if (!flist && !(flist = first_flist))
 412                 return NULL;
 413
 414         while (ndx < flist->ndx_start) {
 415                 if (flist == first_flist)
 416                         return NULL;
 417                 flist = flist->prev;
 418         }
 419         while (ndx >= flist->ndx_start + flist->count) {
 420                 if (!(flist = flist->next))
 421                         return NULL;
 422         }
 423         return flist;
 424 }
 425
 426 const char *who_am_i(void)
 427 {
 428         if (am_starting_up)
 429                 return am_server ? "server" : "client";
 430         return am_sender ? "sender" : am_generator ? "generator" : "receiver";
 431 }