通过终端创建文件并在脚本 python3 中连接两个文件

通过终端创建文件并在脚本 python3 中连接两个文件

我有一个名为“dir”的递归目录。我正在终端上的 Linux 中使用以下命令将所有子目录中的文件列表写入 CSV 文件。

dir$ find . -type f -printf '%f\n' > old_names.csv

我正在使用排毒代码来更改文件名。我正在使用创建一个新列表

dir $ find . -type f -printf '%f\n' > new_names.csv

我想将其加入到列表中,并创建一个包含两列的新列表,如下所示;

在此输入图像描述

为此,我将两个 csv 文件读入 pandas 数据框,并将它们加入到索引中,如下所示在 python3 脚本中

 import pandas as pd
 import csv

 df_old=pd.read_csv(os.path.join(somepath,'old_names.csv')
 df_new=pd.read_csv(os.path.join(somepath,'new_names.csv')
 df_names=df_new.join(df_old)

问题是我收到这样的信息,错误的文件对;

在此输入图像描述

当我打开 new_names.csv 时,我发现文件列表的写入顺序与 old_names 列表不同,因此加入索引会导致错误的对。我怎么解决这个问题?

答案1

find命令只是按照文件系统给出目录条目的顺序输出,而不进行任何排序或处理。根据您使用的文件系统和其他因素,即使重命名单个文件也可能会更改迭代顺序,但更改所有文件很可能会这样做。如果没有严格控制的环境,就没有特别的理由两个finds 应该给出相同的命令。

例如,许多现代文件系统将名称存储在哈希表,并按照条目出现的顺序进行迭代。微小的文件名更改在表中可能比原始文件名早或晚得多,甚至导致整个目录重新散列,以便一切移动。在这种情况下,没有现实的方法可以将各个部分重新组合在一起。

它是可能的如果每个文件名都有一个唯一的未更改前缀,那么sort对文件名进行处理可能会有所帮助,但这是您可以对两次运行中的两个单独文件进行并继续进行的唯一现实的后处理类型find。我什至不建议尝试这样做。


但是,detox确实有一个-v选项可以打印出它所做的更改(并且-n打印出它所做的更改)做)。您可以使用它来生成 CSV 文件,或者直接从Python使用subprocess.run

detox -v ... | sed -e 's/ -> /,/' > names.csv

将生成一个 CSV 文件,至少与您的其中一个find文件一样,并且新旧名称会自动匹配。对于基本名称(就像%f以前那样),您需要进行后处理,如果需要,您可以在 Python 中或在 shell 中执行此操作。

相关内容