当我在 USB 密钥上 rsync 时,如何替换冒号?

当我在 USB 密钥上 rsync 时,如何替换冒号?

我想将我的邮件目录备份到 USB 密钥上。但是,我的 IMAP 有一个奇怪的命名约定,即某些文件包含冒号 (:) 字符。由于 USB 是窗口格式,因此 rsync 无法创建这些文件。运行 rsync 时,有没有办法用下划线替换冒号字符?(或者使用其他工具进行相同的同步?)

我在评论中澄清了几点:

  • 这是一个最坏的情况备份,我希望能够在 Windows 机器上读取它,而无需安装任何东西。
  • 我有很多保持不变的数据。因此,如果我有一个只复制较新文件的工具,我就可以节省很多时间。
  • 我并不是在寻找 rsync 的重写版本。我正在寻找一种可以立即使用的现有工具。

谢谢

答案1

使用rdiff-备份而不是简单的 rsync。它将自动检测并替换目标磁盘上不支持的字符,并在您恢复到 unix 文件系统时将它们恢复到原样。它会生成一个解压目录,该目录看起来就像原目录加上一个额外的元数据目录。

答案2

最直接的方法是利用文件系统层来转换文件名。从 Ubuntu 12.04 开始,有一个保险丝将文件名转换为 Windows 的 VFAT 支持的名称的文件系统:fuse-posixovl 安装 fuse-posixovl

sudo mount.posixovl /media/sdb1
chown guillaume /media/sdb1
rsync -au ~/mail /media/sbd1/

或者避免需要 root 访问权限:

mkdir ~/mnt
/sbin/mount.posixovl -S /media/sdb1 ~/mnt
rsync -au ~/mail ~/mnt/

VFAT 不接受的文件名中的字符被编码为十六%(XX)进制XX数字。从 POSIXovl 1.2.20120215 开始,请注意,像 这样的文件名%(3A)被编码为其自身,并将被解码为:,因此如果您的文件名包含 形式的子字符串,则存在冲突的风险%(XX)

请注意,POSIXovl 无法处理过长的文件名。如果编码名称的长度不足 255 个字符,则无法存储该文件。

POSIXovl 将 unix 权限和所有权存储在名为 的文件中.pxovl.FILENAME


以下 bash ≥4 脚本复制~/mail/foo:bar/media/usb99/mail/foo_bar,并且对 下的所有文件也执行类似操作~/mail。目标树中已存在且不早于源的文件将被跳过。

#!/bin/bash
set -e
shopt -s dotglob globstar
for source in "$HOME"/mail/**/*; do
  target=/media/usb99/${source#"$HOME"/}
  target=${target//:/_}
  if [[ -d $source ]]; then
    mkdir -p -- "$target"
  elif [[ $target -ot $source ]]; then
    cp -p -- "$source" "$target"
  fi
done

此脚本在 zsh 下运行,只需进行少量修改:替换shopt -s dotglob globstarbysetopt dot_glob[[ $target -ot $source ]]by [[ ! -e $target || $target -ot $source ]]


这是 zsh 的两行代码(如果算上自动加载,则是三行)。它比较短,但相当高级,而且可读性不强。

autoload zargs zmv
zargs -- ~/mail/**/*(/e\''REPLY=/media/usb99/${${REPLY#$HOME/}//:/_}'\') -- mkdir -p --
zmv -C -Q -o -pu '~/mail/(**/)(*)(.)' '/media/usb99/mail/${1//:/_}${2//:/_}'
  • zargs行相当于mkdir -p ~/mail/**/*(…),不同之处在于,如果目录名称的累计长度太长,它不会崩溃。该行会根据需要创建目标目录。
  • ~/mail/**/*(/)扩展到~/mail(仅有末尾的目录(/)) 下的所有目录。
  • (/e\''…'\')仅选择目录并进一步执行‘...’内的代码来转换每个文件名,并将其存储在REPLY变量中。
  • ${${REPLY#$HOME/}//:/_}删除与源目录对应的前缀并更改:_
  • zmv -C将与第一个操作数(zsh 模式)匹配的每个文件复制到通过扩展其第二个操作数获得的文件名。
  • -o -pu表示要传递-pucp实用程序,以便保留权限并仅复制更新的文件。(我们可以告诉 zsh 执行更新检查;这会更快一些,但更加隐秘。)
  • (.)仅选择常规文件。-Q表示这将被解析为一个 glob 限定符,而不是带有.括号(表示子表达式)的限定符。
  • $1$2在替换文本中匹配括号内的表达式(**/)*。(**如果它在括号中,则会失去其作为零个或多个子目录级别的特殊含义,除非括号中恰好包含**/。)

我最初想到的是使用帕克斯,这是一个存档工具(此处旨在用于直通模式),具有文件重命名功能(其-s选项)。但是,-s-u选项不能一起使用(pax 的 POSIX 定义字面上说-u必须检查目标树中同名的文件,而不是 转换的文件名-s;Ubuntu 中的 pax 实现遵循了规范的字面意义,而不是实用意义)。仍然可以利用它来创建重命名的硬链接,然后将硬链接(使用rsync -aupax -rw -pp -u)复制到其他媒体,但感觉麻烦多于价值。

cd ~/mail
mkdir -p /media/usb99/mail
pax -rw -l -pp -s '!:!_!g' . ../mail.colonless
rsync -au ../mail.colonless/ /media/usb99/mail/

答案3

我对 USB 记忆棒和移动 USB 磁盘的做法是将它们分成两个分区:一个 FAT32 分区和一个 ext4 分区。第一个分区我可以用来与非 Linux 用户交换数据,第二个分区供我个人使用,用于我的 Ubuntu 系统(也许还用于与其他 Linux 用户交换数据)。在 ext4 分区上,您不会遇到“:”问题。

答案4

您可以使用它tar来创建档案。这样您就不必更改名称,并且可以将其保存到您想要的任何文件系统。

相关内容