main.c

   1 /*
   2    Copyright (C) Andrew Tridgell 1996
   3    Copyright (C) Paul Mackerras 1996
   4
   5    This program is free software; you can redistribute it and/or modify
   6    it under the terms of the GNU General Public License as published by
   7    the Free Software Foundation; either version 2 of the License, or
   8    (at your option) any later version.
   9
  10    This program is distributed in the hope that it will be useful,
  11    but WITHOUT ANY WARRANTY; without even the implied warranty of
  12    MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
  13    GNU General Public License for more details.
  14
  15    You should have received a copy of the GNU General Public License
  16    along with this program; if not, write to the Free Software
  17    Foundation, Inc., 675 Mass Ave, Cambridge, MA 02139, USA.
  18 */
  19
  20 #include "rsync.h"
  21
  22 time_t starttime = 0;
  23
  24 struct stats stats;
  25
  26 extern int csum_length;
  27
  28 extern int verbose;
  29
  30 static void report(int f)
  31 {
  32         time_t t = time(NULL);
  33         extern int am_server;
  34         extern int am_sender;
  35         extern int am_daemon;
  36         extern int do_stats;
  37
  38         if (am_daemon) {
  39                 syslog(LOG_INFO,"wrote %.0f bytes  read %.0f bytes  total size %.0f\n",
  40                        (double)stats.total_written,
  41                        (double)stats.total_read,
  42                        (double)stats.total_size);
  43                 if (f == -1 || !am_sender) return;
  44         }
  45
  46         if (!verbose) return;
  47
  48         if (am_server && !am_sender) return;
  49
  50         if (am_server && am_sender) {
  51                 write_longint(f,stats.total_read);
  52                 write_longint(f,stats.total_written);
  53                 write_longint(f,stats.total_size);
  54                 return;
  55         }
  56
  57         if (!am_sender) {
  58                 int64 r;
  59                 stats.total_written = read_longint(f);
  60                 r = read_longint(f);
  61                 stats.total_size = read_longint(f);
  62                 stats.total_read = r;
  63         }
  64
  65         if (do_stats) {
  66                 printf("\nNumber of files: %d\n", stats.num_files);
  67                 printf("Number of files transferred: %d\n",
  68                        stats.num_transferred_files);
  69                 printf("Total file size: %.0f bytes\n",
  70                        (double)stats.total_size);
  71                 printf("Total transferred file size: %.0f bytes\n",
  72                        (double)stats.total_transferred_size);
  73                 printf("Literal data: %.0f bytes\n",
  74                        (double)stats.literal_data);
  75                 printf("Matched data: %.0f bytes\n",
  76                        (double)stats.matched_data);
  77                 printf("File list size: %d\n", stats.flist_size);
  78                 printf("Total bytes written: %.0f\n",
  79                        (double)stats.total_written);
  80                 printf("Total bytes read: %.0f\n\n",
  81                        (double)stats.total_read);
  82         }
  83
  84         printf("wrote %.0f bytes  read %.0f bytes  %.2f bytes/sec\n",
  85                (double)stats.total_written,
  86                (double)stats.total_read,
  87                (stats.total_written+stats.total_read)/(0.5 + (t-starttime)));
  88         printf("total size is %.0f  speedup is %.2f\n",
  89                (double)stats.total_size,
  90                (1.0*stats.total_size)/(stats.total_written+stats.total_read));
  91
  92         fflush(stdout);
  93         fflush(stderr);
  94 }
  95
  96
  97 static int do_cmd(char *cmd,char *machine,char *user,char *path,int *f_in,int *f_out)
  98 {
  99         char *args[100];
 100         int i,argc=0, ret;
 101         char *tok,*dir=NULL;
 102         extern int local_server;
 103         extern char *rsync_path;
 104
 105         if (!local_server) {
 106                 if (!cmd)
 107                         cmd = getenv(RSYNC_RSH_ENV);
 108                 if (!cmd)
 109                         cmd = RSYNC_RSH;
 110                 cmd = strdup(cmd);
 111                 if (!cmd)
 112                         goto oom;
 113
 114                 for (tok=strtok(cmd," ");tok;tok=strtok(NULL," ")) {
 115                         args[argc++] = tok;
 116                 }
 117
 118 #if HAVE_REMSH
 119                 /* remsh (on HPUX) takes the arguments the other way around */
 120                 args[argc++] = machine;
 121                 if (user) {
 122                         args[argc++] = "-l";
 123                         args[argc++] = user;
 124                 }
 125 #else
 126                 if (user) {
 127                         args[argc++] = "-l";
 128                         args[argc++] = user;
 129                 }
 130                 args[argc++] = machine;
 131 #endif
 132
 133                 args[argc++] = rsync_path;
 134
 135                 server_options(args,&argc);
 136         }
 137
 138         args[argc++] = ".";
 139
 140         if (path && *path)
 141                 args[argc++] = path;
 142
 143         args[argc] = NULL;
 144
 145         if (verbose > 3) {
 146                 rprintf(FINFO,"cmd=");
 147                 for (i=0;i<argc;i++)
 148                         rprintf(FINFO,"%s ",args[i]);
 149                 rprintf(FINFO,"\n");
 150         }
 151
 152         if (local_server) {
 153                 ret = local_child(argc, args, f_in, f_out);
 154         } else {
 155                 ret = piped_child(args,f_in,f_out);
 156         }
 157
 158         if (dir) free(dir);
 159
 160         return ret;
 161
 162 oom:
 163         out_of_memory("do_cmd");
 164         return 0; /* not reached */
 165 }
 166
 167
 168
 169
 170 static char *get_local_name(struct file_list *flist,char *name)
 171 {
 172         STRUCT_STAT st;
 173         extern int orig_umask;
 174
 175         if (verbose > 2)
 176                 rprintf(FINFO,"get_local_name count=%d %s\n",
 177                         flist->count, name);
 178
 179         if (do_stat(name,&st) == 0) {
 180                 if (S_ISDIR(st.st_mode)) {
 181                         if (!push_dir(name, 0)) {
 182                                 rprintf(FERROR,"push_dir %s : %s (1)\n",
 183                                         name,strerror(errno));
 184                                 exit_cleanup(1);
 185                         }
 186                         return NULL;
 187                 }
 188                 if (flist->count > 1) {
 189                         rprintf(FERROR,"ERROR: destination must be a directory when copying more than 1 file\n");
 190                         exit_cleanup(1);
 191                 }
 192                 return name;
 193         }
 194
 195         if (flist->count == 1)
 196                 return name;
 197
 198         if (!name)
 199                 return NULL;
 200
 201         if (do_mkdir(name,0777 & ~orig_umask) != 0) {
 202                 rprintf(FERROR,"mkdir %s : %s (1)\n",name,strerror(errno));
 203                 exit_cleanup(1);
 204         } else {
 205                 if (verbose > 0)
 206                         rprintf(FINFO,"created directory %s\n",name);
 207         }
 208
 209         if (!push_dir(name, 0)) {
 210                 rprintf(FERROR,"push_dir %s : %s (2)\n",
 211                         name,strerror(errno));
 212                 exit_cleanup(1);
 213         }
 214
 215         return NULL;
 216 }
 217
 218
 219
 220
 221 static void do_server_sender(int f_in, int f_out, int argc,char *argv[])
 222 {
 223         int i;
 224         struct file_list *flist;
 225         char *dir = argv[0];
 226         extern int relative_paths;
 227         extern int recurse;
 228
 229         if (verbose > 2)
 230                 rprintf(FINFO,"server_sender starting pid=%d\n",(int)getpid());
 231
 232         if (!relative_paths && !push_dir(dir, 0)) {
 233                 rprintf(FERROR,"push_dir %s: %s (3)\n",dir,strerror(errno));
 234                 exit_cleanup(1);
 235         }
 236         argc--;
 237         argv++;
 238
 239         if (strcmp(dir,".")) {
 240                 int l = strlen(dir);
 241                 if (strcmp(dir,"/") == 0)
 242                         l = 0;
 243                 for (i=0;i<argc;i++)
 244                         argv[i] += l+1;
 245         }
 246
 247         if (argc == 0 && recurse) {
 248                 argc=1;
 249                 argv--;
 250                 argv[0] = ".";
 251         }
 252
 253         flist = send_file_list(f_out,argc,argv);
 254         if (!flist || flist->count == 0) {
 255                 exit_cleanup(0);
 256         }
 257
 258         set_nonblocking(f_out);
 259         if (f_in != f_out)
 260                 set_nonblocking(f_in);
 261
 262         send_files(flist,f_out,f_in);
 263         report(f_out);
 264         io_flush();
 265         exit_cleanup(0);
 266 }
 267
 268
 269 static int do_recv(int f_in,int f_out,struct file_list *flist,char *local_name)
 270 {
 271         int pid;
 272         int status=0;
 273         int recv_pipe[2];
 274         extern int preserve_hard_links;
 275
 276         if (preserve_hard_links)
 277                 init_hard_links(flist);
 278
 279         if (pipe(recv_pipe) < 0) {
 280                 rprintf(FERROR,"pipe failed in do_recv\n");
 281                 exit_cleanup(1);
 282         }
 283
 284         io_flush();
 285
 286         if ((pid=do_fork()) == 0) {
 287                 close(recv_pipe[0]);
 288                 if (f_in != f_out) close(f_out);
 289
 290                 set_nonblocking(f_in);
 291
 292                 recv_files(f_in,flist,local_name,recv_pipe[1]);
 293                 report(f_in);
 294
 295                 if (verbose > 3)
 296                         rprintf(FINFO,"do_recv waiting on %d\n",pid);
 297
 298                 io_flush();
 299                 _exit(0);
 300         }
 301
 302         close(recv_pipe[1]);
 303         io_close_input(f_in);
 304         if (f_in != f_out) close(f_in);
 305
 306         set_nonblocking(f_out);
 307
 308         io_start_buffering(f_out);
 309
 310         generate_files(f_out,flist,local_name,recv_pipe[0]);
 311
 312         io_flush();
 313         waitpid(pid, &status, 0);
 314         return status;
 315 }
 316
 317
 318 static void do_server_recv(int f_in, int f_out, int argc,char *argv[])
 319 {
 320         int status;
 321         struct file_list *flist;
 322         char *local_name=NULL;
 323         char *dir = NULL;
 324         extern int delete_mode;
 325         extern int am_daemon;
 326
 327         if (verbose > 2)
 328                 rprintf(FINFO,"server_recv(%d) starting pid=%d\n",argc,(int)getpid());
 329
 330         if (argc > 0) {
 331                 dir = argv[0];
 332                 argc--;
 333                 argv++;
 334                 if (!am_daemon && !push_dir(dir, 0)) {
 335                         rprintf(FERROR,"push_dir %s : %s (4)\n",
 336                                 dir,strerror(errno));
 337                         exit_cleanup(1);
 338                 }
 339         }
 340
 341         if (delete_mode)
 342                 recv_exclude_list(f_in);
 343
 344         flist = recv_file_list(f_in);
 345         if (!flist || flist->count == 0) {
 346                 rprintf(FERROR,"server_recv: nothing to do\n");
 347                 exit_cleanup(1);
 348         }
 349
 350         if (argc > 0) {
 351                 if (strcmp(dir,".")) {
 352                         argv[0] += strlen(dir);
 353                         if (argv[0][0] == '/') argv[0]++;
 354                 }
 355                 local_name = get_local_name(flist,argv[0]);
 356         }
 357
 358         status = do_recv(f_in,f_out,flist,local_name);
 359         exit_cleanup(status);
 360 }
 361
 362
 363 void start_server(int f_in, int f_out, int argc, char *argv[])
 364 {
 365         extern int cvs_exclude;
 366         extern int am_sender;
 367
 368         setup_protocol(f_out, f_in);
 369
 370         if (am_sender) {
 371                 recv_exclude_list(f_in);
 372                 if (cvs_exclude)
 373                         add_cvs_excludes();
 374                 do_server_sender(f_in, f_out, argc, argv);
 375         } else {
 376                 do_server_recv(f_in, f_out, argc, argv);
 377         }
 378         exit_cleanup(0);
 379 }
 380
 381 int client_run(int f_in, int f_out, int pid, int argc, char *argv[])
 382 {
 383         struct file_list *flist;
 384         int status = 0, status2 = 0;
 385         char *local_name = NULL;
 386         extern int am_sender;
 387
 388         setup_protocol(f_out,f_in);
 389
 390         if (am_sender) {
 391                 extern int cvs_exclude;
 392                 extern int delete_mode;
 393                 if (cvs_exclude)
 394                         add_cvs_excludes();
 395                 if (delete_mode)
 396                         send_exclude_list(f_out);
 397                 flist = send_file_list(f_out,argc,argv);
 398                 if (verbose > 3)
 399                         rprintf(FINFO,"file list sent\n");
 400
 401                 set_nonblocking(f_out);
 402                 if (f_in != f_out)
 403                         set_nonblocking(f_in);
 404
 405                 send_files(flist,f_out,f_in);
 406                 if (pid != -1) {
 407                         if (verbose > 3)
 408                                 rprintf(FINFO,"client_run waiting on %d\n",pid);
 409                         io_flush();
 410                         waitpid(pid, &status, 0);
 411                 }
 412                 report(-1);
 413                 exit_cleanup(status);
 414         }
 415
 416         send_exclude_list(f_out);
 417
 418         flist = recv_file_list(f_in);
 419         if (!flist || flist->count == 0) {
 420                 rprintf(FINFO,"client: nothing to do\n");
 421                 exit_cleanup(0);
 422         }
 423
 424         local_name = get_local_name(flist,argv[0]);
 425
 426         status2 = do_recv(f_in,f_out,flist,local_name);
 427
 428         if (pid != -1) {
 429                 if (verbose > 3)
 430                         rprintf(FINFO,"client_run2 waiting on %d\n",pid);
 431                 io_flush();
 432                 waitpid(pid, &status, 0);
 433         }
 434
 435         return status | status2;
 436 }
 437
 438
 439 static int start_client(int argc, char *argv[])
 440 {
 441         char *p;
 442         char *shell_machine = NULL;
 443         char *shell_path = NULL;
 444         char *shell_user = NULL;
 445         int pid, ret;
 446         int f_in,f_out;
 447         extern int local_server;
 448         extern int am_sender;
 449         extern char *shell_cmd;
 450
 451         p = strchr(argv[0],':');
 452
 453         if (p) {
 454                 if (p[1] == ':') {
 455                         *p = 0;
 456                         return start_socket_client(argv[0], p+2, argc-1, argv+1);
 457                 }
 458
 459                 if (argc < 2) {
 460                         usage(FERROR);
 461                         exit_cleanup(1);
 462                 }
 463
 464                 am_sender = 0;
 465                 *p = 0;
 466                 shell_machine = argv[0];
 467                 shell_path = p+1;
 468                 argc--;
 469                 argv++;
 470         } else {
 471                 am_sender = 1;
 472
 473                 p = strchr(argv[argc-1],':');
 474                 if (!p) {
 475                         local_server = 1;
 476                 } else if (p[1] == ':') {
 477                         *p = 0;
 478                         return start_socket_client(argv[argc-1], p+2, argc-1, argv);
 479                 }
 480
 481                 if (argc < 2) {
 482                         usage(FERROR);
 483                         exit_cleanup(1);
 484                 }
 485
 486                 if (local_server) {
 487                         shell_machine = NULL;
 488                         shell_path = argv[argc-1];
 489                 } else {
 490                         *p = 0;
 491                         shell_machine = argv[argc-1];
 492                         shell_path = p+1;
 493                 }
 494                 argc--;
 495         }
 496
 497         if (shell_machine) {
 498                 p = strchr(shell_machine,'@');
 499                 if (p) {
 500                         *p = 0;
 501                         shell_user = shell_machine;
 502                         shell_machine = p+1;
 503                 }
 504         }
 505
 506         if (verbose > 3) {
 507                 rprintf(FINFO,"cmd=%s machine=%s user=%s path=%s\n",
 508                         shell_cmd?shell_cmd:"",
 509                         shell_machine?shell_machine:"",
 510                         shell_user?shell_user:"",
 511                         shell_path?shell_path:"");
 512         }
 513
 514         if (!am_sender && argc != 1) {
 515                 usage(FERROR);
 516                 exit_cleanup(1);
 517         }
 518
 519         pid = do_cmd(shell_cmd,shell_machine,shell_user,shell_path,&f_in,&f_out);
 520
 521 #if HAVE_SETLINEBUF
 522         setlinebuf(stdout);
 523         setlinebuf(stderr);
 524 #endif
 525
 526         ret = client_run(f_in, f_out, pid, argc, argv);
 527
 528         fflush(stdout);
 529         fflush(stderr);
 530
 531         return ret;
 532 }
 533
 534
 535 RETSIGTYPE sigusr1_handler(int val) {
 536         exit_cleanup(1);
 537 }
 538
 539 int main(int argc,char *argv[])
 540 {
 541         extern int am_root;
 542         extern int orig_umask;
 543         extern int dry_run;
 544         extern int am_daemon;
 545         extern int am_server;
 546
 547         signal(SIGUSR1, sigusr1_handler);
 548
 549         starttime = time(NULL);
 550         am_root = (getuid() == 0);
 551
 552         memset(&stats, 0, sizeof(stats));
 553
 554         if (argc < 2) {
 555                 usage(FERROR);
 556                 exit_cleanup(1);
 557         }
 558
 559         /* we set a 0 umask so that correct file permissions can be
 560            carried across */
 561         orig_umask = (int)umask(0);
 562
 563         parse_arguments(argc, argv);
 564
 565         argc -= optind;
 566         argv += optind;
 567         optind = 0;
 568
 569         signal(SIGCHLD,SIG_IGN);
 570         signal(SIGINT,SIGNAL_CAST sig_int);
 571         signal(SIGPIPE,SIGNAL_CAST sig_int);
 572         signal(SIGHUP,SIGNAL_CAST sig_int);
 573
 574         if (am_daemon) {
 575                 return daemon_main();
 576         }
 577
 578         if (argc < 1) {
 579                 usage(FERROR);
 580                 exit_cleanup(1);
 581         }
 582
 583         if (dry_run)
 584                 verbose = MAX(verbose,1);
 585
 586 #ifndef SUPPORT_LINKS
 587         if (!am_server && preserve_links) {
 588                 rprintf(FERROR,"ERROR: symbolic links not supported\n");
 589                 exit_cleanup(1);
 590         }
 591 #endif
 592
 593         if (am_server) {
 594                 start_server(STDIN_FILENO, STDOUT_FILENO, argc, argv);
 595         }
 596
 597         return start_client(argc, argv);
 598 }
 599