最近在处理包含大量小文件的文件夹(同一目录中大约有 50,000 个文件,每个文件大约 1kB~100kB),发现操作非常慢。例如,仅选择 20K 个文件,系统就需要大约 5~10 分钟才能响应。
我没有看到此类操作的高 CPU 或 IO 使用率。此外,命令行操作与往常一样快,所以我认为问题出在文件资源管理器上。在这种情况下我该如何提高性能?
编辑:驱动器是 Intel Optane 905p,系统有 64G RAM。文件是 gzip 文件或 json 文件。
最近在处理包含大量小文件的文件夹(同一目录中大约有 50,000 个文件,每个文件大约 1kB~100kB),发现操作非常慢。例如,仅选择 20K 个文件,系统就需要大约 5~10 分钟才能响应。
我没有看到此类操作的高 CPU 或 IO 使用率。此外,命令行操作与往常一样快,所以我认为问题出在文件资源管理器上。在这种情况下我该如何提高性能?
编辑:驱动器是 Intel Optane 905p,系统有 64G RAM。文件是 gzip 文件或 json 文件。