Changed the unique_prefix and upre_len vars into defines.
[rsync/rsync-patches.git] / xattrs.diff
index baf0d9f..e394781 100644 (file)
@@ -10,6 +10,9 @@ TODO:
 
  - This patch needs to be rewritten to more efficiently handle large xattrs.
 
+ - Extraneous xattr values need to be removed from files that are not being
+   recreated.
+
  - We need to affect the itemized output to know when xattrs are being updated.
 
  - We need to affect the --link-dest option to avoid hard-linking two files
@@ -134,11 +137,12 @@ TODO:
        if ((am_root && preserve_devices && IS_DEVICE(file->mode))
 --- old/configure.in
 +++ new/configure.in
-@@ -856,6 +856,30 @@ samba_cv_HAVE_ACL_GET_PERM_NP=yes,samba_
+@@ -856,6 +856,35 @@ samba_cv_HAVE_ACL_GET_PERM_NP=yes,samba_
    AC_MSG_RESULT(no)
  )
  
 +AC_CHECK_HEADERS(attr/xattr.h)
++AC_CHECK_HEADERS(sys/xattr.h)
 +AC_MSG_CHECKING(whether to support extended attributes)
 +AC_ARG_ENABLE(xattr-support,
 +AC_HELP_STRING([--enable-xattr-support], [Include extended attribute support (default=no)]),
@@ -149,8 +153,12 @@ TODO:
 +            AC_MSG_RESULT(Using Linux xattrs)
 +            AC_DEFINE(HAVE_LINUX_XATTRS, 1, [True if you have Linux xattrs])
 +            ;;
++      darwin*)
++            AC_MSG_RESULT(Using OS X xattrs)
++            AC_DEFINE(HAVE_OSX_XATTRS, 1, [True if you have Mac OS X xattrs])
++            ;;
 +      *)
-+            AC_MSG_RESULT(Xattrs requested but not linux.  Good luck)
++            AC_MSG_RESULT(Xattrs requested but not Linux or OS X.  Good luck...)
 +            ;;
 +      esac
 +      ;;
@@ -222,6 +230,15 @@ TODO:
  
        return file;
  }
+@@ -974,7 +985,7 @@ static struct file_struct *send_file_nam
+                                         unsigned short flags)
+ {
+       struct file_struct *file;
+-#ifdef SUPPORT_ACLS
++#if defined SUPPORT_ACLS || defined SUPPORT_XATTRS
+       statx sx;
+ #endif
 @@ -994,6 +1005,13 @@ static struct file_struct *send_file_nam
                        return NULL;
        }
@@ -258,7 +275,7 @@ TODO:
  }
 --- old/lib/sysxattr.c
 +++ new/lib/sysxattr.c
-@@ -0,0 +1,44 @@
+@@ -0,0 +1,81 @@
 +/*
 + * Extended attribute support for rsync.
 + *
@@ -290,35 +307,85 @@ TODO:
 +      return lgetxattr(path, name, value, size);
 +}
 +
++ssize_t sys_fgetxattr(int filedes, const char *name, void *value, size_t size)
++{
++      return fgetxattr(filedes, name, value, size);
++}
++
 +int sys_lsetxattr(const char *path, const char *name, const void *value, size_t size, int flags)
 +{
 +      return lsetxattr(path, name, value, size, flags);
 +}
 +
++int sys_lremovexattr(const char *path, const char *name)
++{
++      return lremovexattr(path, name);
++}
++
 +ssize_t sys_llistxattr(const char *path, char *list, size_t size)
 +{
 +      return llistxattr(path, list, size);
 +}
 +
++#elif HAVE_OSX_XATTRS
++
++ssize_t sys_lgetxattr(const char *path, const char *name, void *value, size_t size)
++{
++      return getxattr(path, name, value, size, 0, XATTR_NOFOLLOW);
++}
++
++ssize_t sys_fgetxattr(int filedes, const char *name, void *value, size_t size)
++{
++      return fgetxattr(filedes, name, value, size, 0, 0);
++}
++
++int sys_lsetxattr(const char *path, const char *name, const void *value, size_t size, int flags)
++{
++      return setxattr(path, name, value, size, 0, XATTR_NOFOLLOW | flags);
++}
++
++int sys_lremovexattr(const char *path, const char *name)
++{
++      return removexattr(path, name, XATTR_NOFOLLOW);
++}
++
++ssize_t sys_llistxattr(const char *path, char *list, size_t size)
++{
++      return listxattr(path, list, size, XATTR_NOFOLLOW);
++}
++
 +#else
 +
 +#endif /* No xattrs */
 --- old/lib/sysxattr.h
 +++ new/lib/sysxattr.h
-@@ -0,0 +1,13 @@
-+#if defined SUPPORT_XATTRS && defined HAVE_ATTR_XATTR_H
+@@ -0,0 +1,26 @@
++#ifdef SUPPORT_XATTRS
++#if defined HAVE_ATTR_XATTR_H
 +#include <attr/xattr.h>
++#elif defined HAVE_SYS_XATTR_H
++#include <sys/xattr.h>
++#endif
 +#endif
 +
-+#if defined HAVE_LINUX_XATTRS
++#if defined HAVE_LINUX_XATTRS || defined HAVE_OSX_XATTRS
++
++/* Linux 2.4 does not define this as a distinct errno value: */
++#ifndef ENOATTR
++#define ENOATTR ENODATA
++#endif
 +
 +ssize_t sys_lgetxattr(const char *path, const char *name, void *value, size_t size);
++ssize_t sys_fgetxattr(int filedes, const char *name, void *value, size_t size);
 +int sys_lsetxattr(const char *path, const char *name, const void *value, size_t size, int flags);
++int sys_lremovexattr(const char *path, const char *name);
 +ssize_t sys_llistxattr(const char *path, char *list, size_t size);
 +
 +#else
 +
-+#endif /* No xattrs */
++/* No xattrs */
++
++#endif
 --- old/options.c
 +++ new/options.c
 @@ -48,6 +48,7 @@ int copy_links = 0;
@@ -428,24 +495,24 @@ TODO:
  extern int preserve_perms;
  extern int preserve_executability;
  extern int preserve_times;
-@@ -229,6 +230,10 @@ int set_file_attrs(char *fname, struct f
-       if (preserve_acls && set_acl(fname, file, sxp) == 0)
-               updated = 1;
- #endif
+@@ -219,6 +220,10 @@ int set_file_attrs(char *fname, struct f
+       if (daemon_chmod_modes && !S_ISLNK(new_mode))
+               new_mode = tweak_mode(new_mode, daemon_chmod_modes);
 +#ifdef SUPPORT_XATTRS
 +      if (preserve_xattrs && set_xattr(fname, file, sxp) == 0)
 +              updated = 1;
 +#endif
- #ifdef HAVE_CHMOD
-       if ((sxp->st.st_mode & CHMOD_BITS) != (new_mode & CHMOD_BITS)) {
+ #ifdef SUPPORT_ACLS
+       /* It's OK to call set_acl() now, even for a dir, as the generator
+        * will enable owner-writability using chmod, if necessary.
 --- old/rsync.h
 +++ new/rsync.h
 @@ -501,6 +501,10 @@ struct idev {
  #define ACLS_NEED_MASK 1
  #endif
  
-+#ifdef HAVE_LINUX_XATTRS
++#if defined HAVE_LINUX_XATTRS || defined HAVE_OSX_XATTRS
 +#define SUPPORT_XATTRS 1
 +#endif
 +
@@ -495,7 +562,7 @@ TODO:
  transfer.  The resulting value is treated as though it was the permissions
 --- old/xattr.c
 +++ new/xattr.c
-@@ -0,0 +1,360 @@
+@@ -0,0 +1,368 @@
 +/*
 + * Extended Attribute support for rsync.
 + * Written by Jay Fenlason, vaguely based on the ACLs patch.
@@ -539,12 +606,14 @@ TODO:
 +static size_t namebuf_len = 0;
 +static char *namebuf = NULL;
 +
-+static size_t datumbuf_len = 0;
-+static char *datumbuf = NULL;
-+
 +static item_list empty_xattr = EMPTY_ITEM_LIST;
 +static item_list rsync_xal_l = EMPTY_ITEM_LIST;
 +
++#ifdef HAVE_OSX_XATTRS
++#define UNIQUE_PREFIX "user.0S%." /* OSX */
++#define UPRE_LEN (sizeof UNIQUE_PREFIX - 1)
++#endif
++
 +/* ------------------------------------------------------------------------- */
 +
 +static void rsync_xal_free(item_list *xalp)
@@ -583,14 +652,13 @@ TODO:
 +      char *ptr;
 +
 +      if (!namebuf) {
-+              namebuf_len = 100;
++              namebuf_len = 1024;
 +              namebuf = new_array(char, namebuf_len);
-+              datumbuf_len = 100;
-+              datumbuf = new_array(char, datumbuf_len);
-+              if (!namebuf || !datumbuf)
++              if (!namebuf)
 +                      out_of_memory("rsync_xal_get");
 +      }
 +
++      /* The length returned includes all the '\0' terminators. */
 +      name_size = sys_llistxattr(fname, namebuf, namebuf_len);
 +      if (name_size > (ssize_t)namebuf_len) {
 +              name_size = -1;
@@ -606,10 +674,10 @@ TODO:
 +                                      fname);
 +                              return -1;
 +                      }
-+                      namebuf = realloc_array(namebuf, char, name_size + 1);
++                      namebuf = realloc_array(namebuf, char, name_size + 1024);
 +                      if (!namebuf)
 +                              out_of_memory("rsync_xal_get");
-+                      namebuf_len = name_size;
++                      namebuf_len = name_size + 1024;
 +                      name_size = sys_llistxattr(fname, namebuf, namebuf_len);
 +                      if (name_size < 0) {
 +                              rsyserr(FERROR, errno,
@@ -630,50 +698,40 @@ TODO:
 +              rsync_xa *rxas = EXPAND_ITEM_LIST(xalp, rsync_xa, RSYNC_XAL_INITIAL);
 +
 +              len = strlen(name) + 1;
-+              datum_size = sys_lgetxattr(fname, name, datumbuf, datumbuf_len);
-+              if (datum_size > (ssize_t)datumbuf_len) {
-+                      datum_size = -1;
-+                      errno = ERANGE;
-+              }
++              datum_size = sys_lgetxattr(fname, name, NULL, 0);
 +              if (datum_size < 0) {
 +                      if (errno == ENOTSUP)
 +                              return -1;
-+                      if (errno == ERANGE) {
-+                              datum_size = sys_lgetxattr(fname, name, NULL, 0);
-+                              if (datum_size < 0) {
-+                                      rsyserr(FERROR, errno,
-+                                          "%s: rsync_xal_get: lgetxattr %s failed",
-+                                          fname, name);
-+                                      return -1;
-+                              }
-+                              datumbuf = realloc_array(datumbuf, char, datum_size + 1);
-+                              if (!datumbuf)
-+                                      out_of_memory("rsync_xal_get");
-+                              datumbuf_len = datum_size;
-+                              datum_size = sys_lgetxattr(fname, name, datumbuf, datumbuf_len);
-+                              if (datum_size < 0) {
-+                                      rsyserr(FERROR, errno,
-+                                          "%s: rsync_xal_get: re-lgetxattr of %s failed",
-+                                          name, fname);
-+                                      return -1;
-+                              }
-+                      } else {
-+                              rsyserr(FERROR, errno,
-+                                  "%s: rsync_xal_get: lgetxattr %s failed",
-+                                  fname, name);
-+                              return -1;
-+                      }
++                      rsyserr(FERROR, errno,
++                          "%s: rsync_xal_get: lgetxattr %s failed",
++                          fname, name);
++                      return -1;
 +              }
 +              ptr = new_array(char, len + datum_size);
 +              if (!ptr)
 +                      out_of_memory("rsync_xal_get");
 +              memcpy(ptr, name, len);
-+              if (datum_size)
-+                      memcpy(ptr + len, datumbuf, datum_size);
 +              rxas->name_len = len;
 +              rxas->name = ptr;
 +              rxas->datum_len = datum_size;
 +              rxas->datum = ptr + len;
++              if (datum_size) {
++                      ssize_t size = sys_lgetxattr(fname, name, rxas->datum, datum_size);
++                      if (size != datum_size) {
++                              if (size < 0) {
++                                      rsyserr(FERROR, errno,
++                                          "rsync_xal_get: lgetxattr(%s,%s)"
++                                          " failed", fname, name);
++                              } else {
++                                      rprintf(FERROR,
++                                          "rsync_xal_get: lgetxattr(%s,%s)"
++                                          " returned %ld instead of %ld\n",
++                                          fname, name,
++                                          (long)size, (long)datum_size);
++                              }
++                              return -1;
++                      }
++              }
 +      }
 +      if (xalp->count > 1)
 +              qsort(xalp->items, xalp->count, sizeof (rsync_xa), rsync_xal_compare_names);
@@ -726,8 +784,9 @@ TODO:
 +      item_list *new_lst = EXPAND_ITEM_LIST(&rsync_xal_l, item_list, RSYNC_XAL_LIST_INITIAL);
 +      /* Since the following call starts a new list, we know it will hold the
 +       * entire initial-count, not just enough space for one new item. */
-+      (void)EXPAND_ITEM_LIST(new_lst, item_list, xalp->count);
-+      memcpy(new_lst->items, xalp->items, xalp->count * sizeof (item_list));
++      *new_lst = empty_xattr;
++      (void)EXPAND_ITEM_LIST(new_lst, rsync_xa, xalp->count);
++      memcpy(new_lst->items, xalp->items, xalp->count * sizeof (rsync_xa));
 +      new_lst->count = xalp->count;
 +      xalp->count = 0;
 +}
@@ -746,12 +805,22 @@ TODO:
 +              write_byte(f, 'X');
 +              write_int(f, count);
 +              for (rxa = sxp->xattr->items; count--; rxa++) {
-+                      write_int(f, rxa->name_len);
-+                      write_int(f, rxa->datum_len);
++#ifdef HAVE_OSX_XATTRS
++                      if (strncmp(rxa->name, "user.", 5) != 0
++                       && strncmp(rxa->name, "system.", 7) != 0) {
++                              write_int(f, rxa->name_len + UPRE_LEN);
++                              write_int(f, rxa->datum_len);
++                              write_buf(f, UNIQUE_PREFIX, UPRE_LEN);
++                      } else
++#endif
++                      {
++                              write_int(f, rxa->name_len);
++                              write_int(f, rxa->datum_len);
++                      }
 +                      write_buf(f, rxa->name, rxa->name_len);
 +                      write_buf(f, rxa->datum, rxa->datum_len);
 +              }
-+              rsync_xal_store(sxp->xattr);
++              rsync_xal_store(sxp->xattr); /* adds item to rsync_xal_l */
 +      }
 +      free_xattr(sxp);
 +}
@@ -785,9 +854,15 @@ TODO:
 +                      rxa->datum_len = datum_len;
 +                      rxa->name = ptr;
 +                      rxa->datum = ptr + name_len;
++#ifdef HAVE_OSX_XATTRS
++                      if (strncmp(rxa->name, UNIQUE_PREFIX, UPRE_LEN) == 0) {
++                              rxa->name_len -= UPRE_LEN;
++                              memmove(rxa->name, rxa->name + UPRE_LEN, rxa->name_len);
++                      }
++#endif
 +              }
-+              ndx = rsync_xal_l.count;
-+              rsync_xal_store(&temp_xattr);
++              ndx = rsync_xal_l.count; /* pre-incremented count */
++              rsync_xal_store(&temp_xattr); /* adds item to rsync_xal_l */
 +      } else if (tag == 'x') {
 +              ndx = read_int(f);
 +              if (ndx < 0 || (size_t)ndx >= rsync_xal_l.count) {
@@ -818,7 +893,7 @@ TODO:
 +
 +      ndx = find_matching_xattr(sxp->xattr);
 +      if (ndx == -1)
-+              rsync_xal_store(sxp->xattr);
++              rsync_xal_store(sxp->xattr); /* adds item to rsync_xal_l */
 +      free_xattr(sxp);
 +
 +      SIVAL(ndx_ptr, 0, ndx);