Cause all three processes to report memory stats when -vv --stats
[rsync/rsync.git] / main.c
1 /* -*- c-file-style: "linux" -*-
2
3    Copyright (C) 1996-2001 by Andrew Tridgell <tridge@samba.org>
4    Copyright (C) Paul Mackerras 1996
5    Copyright (C) 2001, 2002 by Martin Pool <mbp@samba.org>
6
7    This program is free software; you can redistribute it and/or modify
8    it under the terms of the GNU General Public License as published by
9    the Free Software Foundation; either version 2 of the License, or
10    (at your option) any later version.
11
12    This program is distributed in the hope that it will be useful,
13    but WITHOUT ANY WARRANTY; without even the implied warranty of
14    MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
15    GNU General Public License for more details.
16
17    You should have received a copy of the GNU General Public License
18    along with this program; if not, write to the Free Software
19    Foundation, Inc., 675 Mass Ave, Cambridge, MA 02139, USA.
20 */
21
22 #include "rsync.h"
23
24 time_t starttime = 0;
25
26 extern struct stats stats;
27 extern int am_root;
28 extern int am_server;
29 extern int am_sender;
30 extern int am_generator;
31 extern int am_daemon;
32 extern int verbose;
33 extern int blocking_io;
34 extern int cvs_exclude;
35 extern int delete_mode;
36 extern int delete_excluded;
37 extern int delete_after;
38 extern int daemon_over_rsh;
39 extern int do_stats;
40 extern int dry_run;
41 extern int list_only;
42 extern int local_server;
43 extern int log_got_error;
44 extern int module_id;
45 extern int orig_umask;
46 extern int preserve_hard_links;
47 extern int protocol_version;
48 extern int recurse;
49 extern int relative_paths;
50 extern int rsync_port;
51 extern int read_batch;
52 extern int write_batch;
53 extern int filesfrom_fd;
54 extern pid_t cleanup_child_pid;
55 extern char *files_from;
56 extern char *remote_filesfrom_file;
57 extern char *rsync_path;
58 extern char *shell_cmd;
59 extern struct file_list *batch_flist;
60
61
62 /* there's probably never more than at most 2 outstanding child processes,
63  * but set it higher just in case.
64  */
65 #define MAXCHILDPROCS 5
66
67 struct pid_status {
68         pid_t pid;
69         int   status;
70 } pid_stat_table[MAXCHILDPROCS];
71
72 static void show_malloc_stats(void);
73
74 /****************************************************************************
75 wait for a process to exit, calling io_flush while waiting
76 ****************************************************************************/
77 void wait_process(pid_t pid, int *status)
78 {
79         pid_t waited_pid;
80         int cnt;
81
82         while ((waited_pid = waitpid(pid, status, WNOHANG)) == 0) {
83                 msleep(20);
84                 io_flush(FULL_FLUSH);
85         }
86
87         if ((waited_pid == -1) && (errno == ECHILD)) {
88                 /* status of requested child no longer available.
89                  * check to see if it was processed by the sigchld_handler.
90                  */
91                 for (cnt = 0;  cnt < MAXCHILDPROCS; cnt++) {
92                         if (pid == pid_stat_table[cnt].pid) {
93                                 *status = pid_stat_table[cnt].status;
94                                 pid_stat_table[cnt].pid = 0;
95                                 break;
96                         }
97                 }
98         }
99
100         /* TODO: If the child exited on a signal, then log an
101          * appropriate error message.  Perhaps we should also accept a
102          * message describing the purpose of the child.  Also indicate
103          * this to the caller so that thhey know something went
104          * wrong.  */
105         *status = WEXITSTATUS(*status);
106 }
107
108 static void report(int f)
109 {
110         time_t t = time(NULL);
111         int send_stats;
112
113         if (do_stats && verbose > 1) {
114                 /* These come out from every process */
115                 show_malloc_stats();
116                 show_flist_stats();
117         }
118
119         if (am_generator)
120                 return;
121
122         if (am_daemon) {
123                 log_exit(0, __FILE__, __LINE__);
124                 if (f == -1 || !am_sender) return;
125         }
126
127         send_stats = verbose || protocol_version >= 20;
128         if (am_server) {
129                 if (am_sender && send_stats) {
130                         int64 w;
131                         /* store total_written in a temporary
132                          * because write_longint changes it */
133                         w = stats.total_written;
134                         write_longint(f,stats.total_read);
135                         write_longint(f,w);
136                         write_longint(f,stats.total_size);
137                 }
138                 return;
139         }
140
141         /* this is the client */
142
143         if (!am_sender && send_stats) {
144                 int64 r;
145                 stats.total_written = read_longint(f);
146                 /* store total_read in a temporary, read_longint changes it */
147                 r = read_longint(f);
148                 stats.total_size = read_longint(f);
149                 stats.total_read = r;
150         }
151
152         if (do_stats) {
153                 if (!am_sender && !send_stats) {
154                         /* missing the bytes written by the generator */
155                         rprintf(FINFO, "\nCannot show stats as receiver because remote protocol version is less than 20\n");
156                         rprintf(FINFO, "Use --stats -v to show stats\n");
157                         return;
158                 }
159                 rprintf(FINFO,"\nNumber of files: %d\n", stats.num_files);
160                 rprintf(FINFO,"Number of files transferred: %d\n",
161                         stats.num_transferred_files);
162                 rprintf(FINFO,"Total file size: %.0f bytes\n",
163                         (double)stats.total_size);
164                 rprintf(FINFO,"Total transferred file size: %.0f bytes\n",
165                         (double)stats.total_transferred_size);
166                 rprintf(FINFO,"Literal data: %.0f bytes\n",
167                         (double)stats.literal_data);
168                 rprintf(FINFO,"Matched data: %.0f bytes\n",
169                         (double)stats.matched_data);
170                 rprintf(FINFO,"File list size: %d\n", stats.flist_size);
171                 rprintf(FINFO,"Total bytes written: %.0f\n",
172                         (double)stats.total_written);
173                 rprintf(FINFO,"Total bytes read: %.0f\n",
174                         (double)stats.total_read);
175         }
176
177         if (verbose || do_stats) {
178                 rprintf(FINFO,"\nwrote %.0f bytes  read %.0f bytes  %.2f bytes/sec\n",
179                         (double)stats.total_written,
180                         (double)stats.total_read,
181                         (stats.total_written+stats.total_read)/(0.5 + (t-starttime)));
182                 rprintf(FINFO,"total size is %.0f  speedup is %.2f\n",
183                         (double)stats.total_size,
184                         (1.0*stats.total_size)/(stats.total_written+stats.total_read));
185         }
186
187         fflush(stdout);
188         fflush(stderr);
189 }
190
191
192 /**
193  * If our C library can get malloc statistics, then show them to FINFO
194  **/
195 static void show_malloc_stats(void)
196 {
197 #ifdef HAVE_MALLINFO
198         struct mallinfo mi;
199
200         mi = mallinfo();
201
202         rprintf(FINFO, "\n" RSYNC_NAME "[%d] (%s%s%s) heap statistics:\n",
203                 getpid(),
204                 am_server ? "server " : "",
205                 am_daemon ? "daemon " : "",
206                 who_am_i());
207         rprintf(FINFO, "  arena:     %10d   (bytes from sbrk)\n", mi.arena);
208         rprintf(FINFO, "  ordblks:   %10d   (chunks not in use)\n", mi.ordblks);
209         rprintf(FINFO, "  smblks:    %10d\n", mi.smblks);
210         rprintf(FINFO, "  hblks:     %10d   (chunks from mmap)\n", mi.hblks);
211         rprintf(FINFO, "  hblkhd:    %10d   (bytes from mmap)\n", mi.hblkhd);
212         rprintf(FINFO, "  usmblks:   %10d\n", mi.usmblks);
213         rprintf(FINFO, "  fsmblks:   %10d\n", mi.fsmblks);
214         rprintf(FINFO, "  uordblks:  %10d   (bytes used)\n", mi.uordblks);
215         rprintf(FINFO, "  fordblks:  %10d   (bytes free)\n", mi.fordblks);
216         rprintf(FINFO, "  keepcost:  %10d   (bytes in releasable chunk)\n", mi.keepcost);
217 #endif /* HAVE_MALLINFO */
218 }
219
220
221 /* Start the remote shell.   cmd may be NULL to use the default. */
222 static pid_t do_cmd(char *cmd,char *machine,char *user,char *path,int *f_in,int *f_out)
223 {
224         char *args[100];
225         int i,argc=0;
226         pid_t ret;
227         char *tok,*dir=NULL;
228         int dash_l_set = 0;
229
230         if (!read_batch && !local_server) {
231                 char *rsh_env = getenv(RSYNC_RSH_ENV);
232                 if (!cmd)
233                         cmd = rsh_env;
234                 if (!cmd)
235                         cmd = RSYNC_RSH;
236                 cmd = strdup(cmd);
237                 if (!cmd)
238                         goto oom;
239
240                 for (tok=strtok(cmd," ");tok;tok=strtok(NULL," ")) {
241                         args[argc++] = tok;
242                 }
243
244                 /* check to see if we've already been given '-l user' in
245                  * the remote-shell command */
246                 for (i = 0; i < argc-1; i++) {
247                         if (!strcmp(args[i], "-l") && args[i+1][0] != '-')
248                                 dash_l_set = 1;
249                 }
250
251 #if HAVE_REMSH
252                 /* remsh (on HPUX) takes the arguments the other way around */
253                 args[argc++] = machine;
254                 if (user && !(daemon_over_rsh && dash_l_set)) {
255                         args[argc++] = "-l";
256                         args[argc++] = user;
257                 }
258 #else
259                 if (user && !(daemon_over_rsh && dash_l_set)) {
260                         args[argc++] = "-l";
261                         args[argc++] = user;
262                 }
263                 args[argc++] = machine;
264 #endif
265
266                 args[argc++] = rsync_path;
267
268                 if (blocking_io < 0) {
269                         char *cp;
270                         if ((cp = strrchr(cmd, '/')) != NULL)
271                                 cp++;
272                         else
273                                 cp = cmd;
274                         if (strcmp(cp, "rsh") == 0 || strcmp(cp, "remsh") == 0)
275                                 blocking_io = 1;
276                 }
277
278                 server_options(args,&argc);
279         }
280
281         args[argc++] = ".";
282
283         if (!daemon_over_rsh && path && *path)
284                 args[argc++] = path;
285
286         args[argc] = NULL;
287
288         if (verbose > 3) {
289                 rprintf(FINFO,"cmd=");
290                 for (i=0;i<argc;i++)
291                         rprintf(FINFO,"%s ",args[i]);
292                 rprintf(FINFO,"\n");
293         }
294
295         if (local_server) {
296                 if (read_batch)
297                         create_flist_from_batch(); /* sets batch_flist */
298                 ret = local_child(argc, args, f_in, f_out, child_main);
299         } else {
300                 ret = piped_child(args,f_in,f_out);
301         }
302
303         if (dir) free(dir);
304
305         return ret;
306
307 oom:
308         out_of_memory("do_cmd");
309         return 0; /* not reached */
310 }
311
312
313 static char *get_local_name(struct file_list *flist,char *name)
314 {
315         STRUCT_STAT st;
316         int e;
317
318         if (verbose > 2)
319                 rprintf(FINFO,"get_local_name count=%d %s\n",
320                         flist->count, NS(name));
321
322         if (!name)
323                 return NULL;
324
325         if (do_stat(name,&st) == 0) {
326                 if (S_ISDIR(st.st_mode)) {
327                         if (!push_dir(name)) {
328                                 rprintf(FERROR, "push_dir %s failed: %s (1)\n",
329                                         full_fname(name), strerror(errno));
330                                 exit_cleanup(RERR_FILESELECT);
331                         }
332                         return NULL;
333                 }
334                 if (flist->count > 1) {
335                         rprintf(FERROR,"ERROR: destination must be a directory when copying more than 1 file\n");
336                         exit_cleanup(RERR_FILESELECT);
337                 }
338                 return name;
339         }
340
341         if (flist->count <= 1 && ((e = strlen(name)) <= 1 || name[e-1] != '/'))
342                 return name;
343
344         if (do_mkdir(name,0777 & ~orig_umask) != 0) {
345                 rprintf(FERROR, "mkdir %s failed: %s\n",
346                         full_fname(name), strerror(errno));
347                 exit_cleanup(RERR_FILEIO);
348         } else {
349                 if (verbose > 0)
350                         rprintf(FINFO,"created directory %s\n",name);
351         }
352
353         if (!push_dir(name)) {
354                 rprintf(FERROR, "push_dir %s failed: %s (2)\n",
355                         full_fname(name), strerror(errno));
356                 exit_cleanup(RERR_FILESELECT);
357         }
358
359         return NULL;
360 }
361
362
363 static void do_server_sender(int f_in, int f_out, int argc,char *argv[])
364 {
365         int i;
366         struct file_list *flist;
367         char *dir = argv[0];
368
369         if (verbose > 2) {
370                 rprintf(FINFO, "server_sender starting pid=%ld\n",
371                         (long)getpid());
372         }
373
374         if (!relative_paths && !push_dir(dir)) {
375                 rprintf(FERROR, "push_dir %s failed: %s (3)\n",
376                         full_fname(dir), strerror(errno));
377                 exit_cleanup(RERR_FILESELECT);
378         }
379         argc--;
380         argv++;
381
382         if (strcmp(dir,".")) {
383                 int l = strlen(dir);
384                 if (strcmp(dir,"/") == 0)
385                         l = 0;
386                 for (i=0;i<argc;i++)
387                         argv[i] += l+1;
388         }
389
390         if (argc == 0 && recurse) {
391                 argc=1;
392                 argv--;
393                 argv[0] = ".";
394         }
395
396         flist = send_file_list(f_out,argc,argv);
397         if (!flist || flist->count == 0) {
398                 exit_cleanup(0);
399         }
400
401         io_start_buffering_in(f_in);
402         io_start_buffering_out(f_out);
403         send_files(flist,f_out,f_in);
404         io_flush(FULL_FLUSH);
405         report(f_out);
406         if (protocol_version >= 24) {
407                 /* final goodbye message */
408                 read_int(f_in);
409         }
410         io_flush(FULL_FLUSH);
411         exit_cleanup(0);
412 }
413
414
415 static int do_recv(int f_in,int f_out,struct file_list *flist,char *local_name)
416 {
417         int pid;
418         int status=0;
419         int error_pipe[2];
420
421         if (preserve_hard_links)
422                 init_hard_links(flist);
423
424         if (!delete_after) {
425                 /* I moved this here from recv_files() to prevent a race condition */
426                 if (recurse && delete_mode && !local_name && flist->count>0) {
427                         delete_files(flist);
428                 }
429         }
430
431         if (fd_pair(error_pipe) < 0) {
432                 rprintf(FERROR,"error pipe failed in do_recv\n");
433                 exit_cleanup(RERR_SOCKETIO);
434         }
435
436         io_flush(NORMAL_FLUSH);
437
438         if ((pid=do_fork()) == 0) {
439                 close(error_pipe[0]);
440                 if (f_in != f_out) close(f_out);
441
442                 /* we can't let two processes write to the socket at one time */
443                 io_multiplexing_close();
444
445                 /* set place to send errors */
446                 set_msg_fd_out(error_pipe[1]);
447
448                 recv_files(f_in,flist,local_name);
449                 io_flush(FULL_FLUSH);
450                 report(f_in);
451
452                 send_msg(MSG_DONE, "", 0);
453                 io_flush(FULL_FLUSH);
454                 /* finally we go to sleep until our parent kills us
455                  * with a USR2 signal. We sleep for a short time as on
456                  * some OSes a signal won't interrupt a sleep! */
457                 while (1)
458                         msleep(20);
459         }
460
461         am_generator = 1;
462
463         close(error_pipe[1]);
464         if (f_in != f_out) close(f_in);
465
466         io_start_buffering_out(f_out);
467
468         set_msg_fd_in(error_pipe[0]);
469
470         generate_files(f_out, flist, local_name);
471
472         get_redo_num(); /* Read final MSG_DONE and any prior messages. */
473         report(-1);
474         io_flush(FULL_FLUSH);
475         if (protocol_version >= 24) {
476                 /* send a final goodbye message */
477                 write_int(f_out, -1);
478         }
479         io_flush(FULL_FLUSH);
480
481         set_msg_fd_in(-1);
482         kill(pid, SIGUSR2);
483         wait_process(pid, &status);
484         return status;
485 }
486
487
488 static void do_server_recv(int f_in, int f_out, int argc,char *argv[])
489 {
490         int status;
491         struct file_list *flist;
492         char *local_name=NULL;
493         char *dir = NULL;
494
495         if (verbose > 2) {
496                 rprintf(FINFO, "server_recv(%d) starting pid=%ld\n",
497                         argc, (long)getpid());
498         }
499
500         if (am_daemon && lp_read_only(module_id) && !am_sender) {
501                 rprintf(FERROR,"ERROR: module is read only\n");
502                 exit_cleanup(RERR_SYNTAX);
503                 return;
504         }
505
506
507         if (argc > 0) {
508                 dir = argv[0];
509                 argc--;
510                 argv++;
511                 if (!am_daemon && !push_dir(dir)) {
512                         rprintf(FERROR, "push_dir %s failed: %s (4)\n",
513                                 full_fname(dir), strerror(errno));
514                         exit_cleanup(RERR_FILESELECT);
515                 }
516         }
517
518         io_start_buffering_in(f_in);
519         if (delete_mode && !delete_excluded)
520                 recv_exclude_list(f_in);
521
522         if (filesfrom_fd >= 0) {
523                 /* We're receiving the file info from the sender, so we need
524                  * the IO routines to automatically write out the names onto
525                  * our f_out socket as we read the list info from the sender.
526                  * This avoids both deadlock and extra delays/buffers. */
527                 io_set_filesfrom_fds(filesfrom_fd, f_out);
528                 filesfrom_fd = -1;
529         }
530
531         if (read_batch)
532                 flist = batch_flist;
533         else
534                 flist = recv_file_list(f_in);
535         if (!flist) {
536                 rprintf(FERROR,"server_recv: recv_file_list error\n");
537                 exit_cleanup(RERR_FILESELECT);
538         }
539
540         if (argc > 0) {
541                 if (strcmp(dir,".")) {
542                         argv[0] += strlen(dir);
543                         if (argv[0][0] == '/') argv[0]++;
544                 }
545                 local_name = get_local_name(flist,argv[0]);
546         }
547
548         status = do_recv(f_in,f_out,flist,local_name);
549         exit_cleanup(status);
550 }
551
552
553 int child_main(int argc, char *argv[])
554 {
555         start_server(STDIN_FILENO, STDOUT_FILENO, argc, argv);
556         return 0;
557 }
558
559
560 void start_server(int f_in, int f_out, int argc, char *argv[])
561 {
562         setup_protocol(f_out, f_in);
563
564         set_nonblocking(f_in);
565         set_nonblocking(f_out);
566
567         if (protocol_version >= 23)
568                 io_start_multiplex_out(f_out);
569
570         if (am_sender) {
571                 if (!read_batch) {
572                         recv_exclude_list(f_in);
573                         if (cvs_exclude)
574                                 add_cvs_excludes();
575                 }
576                 do_server_sender(f_in, f_out, argc, argv);
577         } else {
578                 do_server_recv(f_in, f_out, argc, argv);
579         }
580         exit_cleanup(0);
581 }
582
583
584 /*
585  * This is called once the connection has been negotiated.  It is used
586  * for rsyncd, remote-shell, and local connections.
587  */
588 int client_run(int f_in, int f_out, pid_t pid, int argc, char *argv[])
589 {
590         struct file_list *flist = NULL;
591         int status = 0, status2 = 0;
592         char *local_name = NULL;
593
594         cleanup_child_pid = pid;
595         if (read_batch)
596                 flist = batch_flist;
597
598         set_nonblocking(f_in);
599         set_nonblocking(f_out);
600
601         setup_protocol(f_out,f_in);
602
603         if (protocol_version >= 23)
604                 io_start_multiplex_in(f_in);
605
606         if (am_sender) {
607                 io_start_buffering_out(f_out);
608                 if (cvs_exclude)
609                         add_cvs_excludes();
610                 if (delete_mode && !delete_excluded)
611                         send_exclude_list(f_out);
612                 if (remote_filesfrom_file)
613                         filesfrom_fd = f_in;
614                 if (!read_batch) /* don't write to pipe */
615                         flist = send_file_list(f_out,argc,argv);
616                 if (verbose > 3)
617                         rprintf(FINFO,"file list sent\n");
618
619                 io_flush(NORMAL_FLUSH);
620                 send_files(flist,f_out,f_in);
621                 io_flush(FULL_FLUSH);
622                 if (protocol_version >= 24) {
623                         /* final goodbye message */
624                         read_int(f_in);
625                 }
626                 if (pid != -1) {
627                         if (verbose > 3)
628                                 rprintf(FINFO,"client_run waiting on %d\n", (int) pid);
629                         io_flush(FULL_FLUSH);
630                         wait_process(pid, &status);
631                 }
632                 report(-1);
633                 io_flush(FULL_FLUSH);
634                 exit_cleanup(status);
635         }
636
637         if (argc == 0) {
638                 list_only = 1;
639         }
640
641         if (!write_batch)
642                 send_exclude_list(f_out);
643
644         if (filesfrom_fd >= 0) {
645                 io_set_filesfrom_fds(filesfrom_fd, f_out);
646                 filesfrom_fd = -1;
647         }
648
649         flist = recv_file_list(f_in);
650         if (!flist || flist->count == 0) {
651                 rprintf(FINFO, "client: nothing to do: "
652                         "perhaps you need to specify some filenames or "
653                         "the --recursive option?\n");
654                 exit_cleanup(0);
655         }
656
657         local_name = get_local_name(flist,argv[0]);
658
659         status2 = do_recv(f_in,f_out,flist,local_name);
660
661         if (pid != -1) {
662                 if (verbose > 3)
663                         rprintf(FINFO,"client_run2 waiting on %d\n", (int) pid);
664                 io_flush(FULL_FLUSH);
665                 wait_process(pid, &status);
666         }
667
668         return MAX(status, status2);
669 }
670
671 static int copy_argv (char *argv[])
672 {
673         int i;
674
675         for (i = 0; argv[i]; i++) {
676                 if (!(argv[i] = strdup(argv[i]))) {
677                         rprintf (FERROR, "out of memory at %s(%d)\n",
678                                  __FILE__, __LINE__);
679                         return RERR_MALLOC;
680                 }
681         }
682
683         return 0;
684 }
685
686
687 /**
688  * Start a client for either type of remote connection.  Work out
689  * whether the arguments request a remote shell or rsyncd connection,
690  * and call the appropriate connection function, then run_client.
691  *
692  * Calls either start_socket_client (for sockets) or do_cmd and
693  * client_run (for ssh).
694  **/
695 static int start_client(int argc, char *argv[])
696 {
697         char *p;
698         char *shell_machine = NULL;
699         char *shell_path = NULL;
700         char *shell_user = NULL;
701         int ret;
702         pid_t pid;
703         int f_in,f_out;
704         int rc;
705
706         /* Don't clobber argv[] so that ps(1) can still show the right
707          * command line. */
708         if ((rc = copy_argv(argv)))
709                 return rc;
710
711         /* rsync:// always uses rsync server over direct socket connection */
712         if (strncasecmp(URL_PREFIX, argv[0], strlen(URL_PREFIX)) == 0) {
713                 char *host, *path;
714
715                 host = argv[0] + strlen(URL_PREFIX);
716                 p = strchr(host,'/');
717                 if (p) {
718                         *p = 0;
719                         path = p+1;
720                 } else {
721                         path = "";
722                 }
723                 p = strchr(host,':');
724                 if (p) {
725                         rsync_port = atoi(p+1);
726                         *p = 0;
727                 }
728                 return start_socket_client(host, path, argc-1, argv+1);
729         }
730
731         if (!read_batch) {
732                 p = find_colon(argv[0]);
733                 if (p) {
734                         if (remote_filesfrom_file
735                          && remote_filesfrom_file != files_from + 1
736                          && strncmp(files_from, argv[0], p-argv[0]+1) != 0) {
737                                 rprintf(FERROR,
738                                         "--files-from hostname is not transfer hostname\n");
739                                 exit_cleanup(RERR_SYNTAX);
740                         }
741                         if (p[1] == ':') { /* double colon */
742                                 *p = 0;
743                                 if (!shell_cmd) {
744                                         return start_socket_client(argv[0], p+2,
745                                                                    argc-1, argv+1);
746                                 }
747                                 p++;
748                                 daemon_over_rsh = 1;
749                         }
750
751                         if (argc < 1) {
752                                 usage(FERROR);
753                                 exit_cleanup(RERR_SYNTAX);
754                         }
755
756                         am_sender = 0;
757                         *p = 0;
758                         shell_machine = argv[0];
759                         shell_path = p+1;
760                         argc--;
761                         argv++;
762                 } else {
763                         am_sender = 1;
764
765                         /* rsync:// destination uses rsync server over direct socket */
766                         if (strncasecmp(URL_PREFIX, argv[argc-1], strlen(URL_PREFIX)) == 0) {
767                                 char *host, *path;
768
769                                 host = argv[argc-1] + strlen(URL_PREFIX);
770                                 p = strchr(host,'/');
771                                 if (p) {
772                                         *p = 0;
773                                         path = p+1;
774                                 } else {
775                                         path = "";
776                                 }
777                                 p = strchr(host,':');
778                                 if (p) {
779                                         rsync_port = atoi(p+1);
780                                         *p = 0;
781                                 }
782                                 return start_socket_client(host, path, argc-1, argv);
783                         }
784
785                         p = find_colon(argv[argc-1]);
786                         if (p && remote_filesfrom_file
787                          && remote_filesfrom_file != files_from + 1
788                          && strncmp(files_from, argv[argc-1], p-argv[argc-1]+1) != 0) {
789                                 rprintf(FERROR,
790                                         "--files-from hostname is not transfer hostname\n");
791                                 exit_cleanup(RERR_SYNTAX);
792                         }
793                         if (!p) {
794                                 local_server = 1;
795                                 if (remote_filesfrom_file) {
796                                         rprintf(FERROR,
797                                                 "--files-from is remote but transfer is local\n");
798                                         exit_cleanup(RERR_SYNTAX);
799                                 }
800                         } else if (p[1] == ':') { /* double colon */
801                                 *p = 0;
802                                 if (!shell_cmd) {
803                                         return start_socket_client(argv[argc-1], p+2,
804                                                                    argc-1, argv);
805                                 }
806                                 p++;
807                                 daemon_over_rsh = 1;
808                         }
809
810                         if (argc < 2) {
811                                 usage(FERROR);
812                                 exit_cleanup(RERR_SYNTAX);
813                         }
814
815                         if (local_server) {
816                                 shell_machine = NULL;
817                                 shell_path = argv[argc-1];
818                         } else {
819                                 *p = 0;
820                                 shell_machine = argv[argc-1];
821                                 shell_path = p+1;
822                         }
823                         argc--;
824                 }
825         } else {
826                 am_sender = 1;
827                 local_server = 1;
828                 shell_path = argv[argc-1];
829         }
830
831         if (shell_machine) {
832                 p = strrchr(shell_machine,'@');
833                 if (p) {
834                         *p = 0;
835                         shell_user = shell_machine;
836                         shell_machine = p+1;
837                 }
838         }
839
840         if (verbose > 3) {
841                 rprintf(FINFO,"cmd=%s machine=%s user=%s path=%s\n",
842                         shell_cmd?shell_cmd:"",
843                         shell_machine?shell_machine:"",
844                         shell_user?shell_user:"",
845                         shell_path?shell_path:"");
846         }
847
848         if (!am_sender && argc > 1) {
849                 usage(FERROR);
850                 exit_cleanup(RERR_SYNTAX);
851         }
852
853         if (argc == 0 && !am_sender) {
854                 list_only = 1;
855         }
856
857         pid = do_cmd(shell_cmd,shell_machine,shell_user,shell_path,
858                      &f_in,&f_out);
859
860         /* if we're running an rsync server on the remote host over a
861          * remote shell command, we need to do the RSYNCD protocol first */
862         if (daemon_over_rsh) {
863                 int tmpret;
864                 tmpret = start_inband_exchange(shell_user, shell_path,
865                                                f_in, f_out, argc);
866                 if (tmpret < 0)
867                         return tmpret;
868         }
869
870         ret = client_run(f_in, f_out, pid, argc, argv);
871
872         fflush(stdout);
873         fflush(stderr);
874
875         return ret;
876 }
877
878
879 static RETSIGTYPE sigusr1_handler(UNUSED(int val))
880 {
881         exit_cleanup(RERR_SIGNAL);
882 }
883
884 static RETSIGTYPE sigusr2_handler(UNUSED(int val))
885 {
886         if (log_got_error) _exit(RERR_PARTIAL);
887         _exit(0);
888 }
889
890 static RETSIGTYPE sigchld_handler(UNUSED(int val))
891 {
892 #ifdef WNOHANG
893         int cnt, status;
894         pid_t pid;
895         /* An empty waitpid() loop was put here by Tridge and we could never
896          * get him to explain why he put it in, so rather than taking it
897          * out we're instead saving the child exit statuses for later use.
898          * The waitpid() loop presumably eliminates all possibility of leaving
899          * zombie children, maybe that's why he did it.
900          */
901         while ((pid = waitpid(-1, &status, WNOHANG)) > 0) {
902                 /* save the child's exit status */
903                 for (cnt = 0; cnt < MAXCHILDPROCS; cnt++) {
904                         if (pid_stat_table[cnt].pid == 0) {
905                                 pid_stat_table[cnt].pid = pid;
906                                 pid_stat_table[cnt].status = status;
907                                 break;
908                         }
909                 }
910         }
911 #endif
912 }
913
914
915 /**
916  * This routine catches signals and tries to send them to gdb.
917  *
918  * Because it's called from inside a signal handler it ought not to
919  * use too many library routines.
920  *
921  * @todo Perhaps use "screen -X" instead/as well, to help people
922  * debugging without easy access to X.  Perhaps use an environment
923  * variable, or just call a script?
924  *
925  * @todo The /proc/ magic probably only works on Linux (and
926  * Solaris?)  Can we be more portable?
927  **/
928 #ifdef MAINTAINER_MODE
929 const char *get_panic_action(void)
930 {
931         const char *cmd_fmt = getenv("RSYNC_PANIC_ACTION");
932
933         if (cmd_fmt)
934                 return cmd_fmt;
935         else
936                 return "xterm -display :0 -T Panic -n Panic "
937                         "-e gdb /proc/%d/exe %d";
938 }
939
940
941 /**
942  * Handle a fatal signal by launching a debugger, controlled by $RSYNC_PANIC_ACTION.
943  *
944  * This signal handler is only installed if we were configured with
945  * --enable-maintainer-mode.  Perhaps it should always be on and we
946  * should just look at the environment variable, but I'm a bit leery
947  * of a signal sending us into a busy loop.
948  **/
949 static RETSIGTYPE rsync_panic_handler(UNUSED(int whatsig))
950 {
951         char cmd_buf[300];
952         int ret;
953
954         sprintf(cmd_buf, get_panic_action(),
955                 getpid(), getpid());
956
957         /* Unless we failed to execute gdb, we allow the process to
958          * continue.  I'm not sure if that's right. */
959         ret = system(cmd_buf);
960         if (ret)
961                 _exit(ret);
962 }
963 #endif
964
965
966 int main(int argc,char *argv[])
967 {
968         int ret;
969         int orig_argc;
970         char **orig_argv;
971
972         orig_argc = argc;
973         orig_argv = argv;
974
975         signal(SIGUSR1, sigusr1_handler);
976         signal(SIGUSR2, sigusr2_handler);
977         signal(SIGCHLD, sigchld_handler);
978 #ifdef MAINTAINER_MODE
979         signal(SIGSEGV, rsync_panic_handler);
980         signal(SIGFPE, rsync_panic_handler);
981         signal(SIGABRT, rsync_panic_handler);
982         signal(SIGBUS, rsync_panic_handler);
983 #endif /* def MAINTAINER_MODE */
984
985         starttime = time(NULL);
986         am_root = (MY_UID() == 0);
987
988         memset(&stats, 0, sizeof(stats));
989
990         if (argc < 2) {
991                 usage(FERROR);
992                 exit_cleanup(RERR_SYNTAX);
993         }
994
995         /* we set a 0 umask so that correct file permissions can be
996          * carried across */
997         orig_umask = (int)umask(0);
998
999         if (!parse_arguments(&argc, (const char ***) &argv, 1)) {
1000                 /* FIXME: We ought to call the same error-handling
1001                  * code here, rather than relying on getopt. */
1002                 option_error();
1003                 exit_cleanup(RERR_SYNTAX);
1004         }
1005
1006         signal(SIGINT,SIGNAL_CAST sig_int);
1007         signal(SIGHUP,SIGNAL_CAST sig_int);
1008         signal(SIGTERM,SIGNAL_CAST sig_int);
1009
1010         /* Ignore SIGPIPE; we consistently check error codes and will
1011          * see the EPIPE. */
1012         signal(SIGPIPE, SIG_IGN);
1013
1014         /* Initialize push_dir here because on some old systems getcwd
1015          * (implemented by forking "pwd" and reading its output) doesn't
1016          * work when there are other child processes.  Also, on all systems
1017          * that implement getcwd that way "pwd" can't be found after chroot. */
1018         push_dir(NULL);
1019
1020         init_flist();
1021
1022         if (write_batch && !am_server) {
1023                 write_batch_argvs_file(orig_argc, orig_argv);
1024         }
1025
1026         if (am_daemon && !am_server)
1027                 return daemon_main();
1028
1029         if (argc < 1) {
1030                 usage(FERROR);
1031                 exit_cleanup(RERR_SYNTAX);
1032         }
1033
1034         if (dry_run)
1035                 verbose = MAX(verbose,1);
1036
1037         if (am_server) {
1038                 set_nonblocking(STDIN_FILENO);
1039                 set_nonblocking(STDOUT_FILENO);
1040                 if (am_daemon)
1041                         return start_daemon(STDIN_FILENO, STDOUT_FILENO);
1042                 start_server(STDIN_FILENO, STDOUT_FILENO, argc, argv);
1043         }
1044
1045         ret = start_client(argc, argv);
1046         if (ret == -1)
1047                 exit_cleanup(RERR_STARTCLIENT);
1048         else
1049                 exit_cleanup(ret);
1050
1051         return ret;
1052 }