如何直接将文件从 Windows 复制到 Linux HDFS

Question

我正在尝试将大量文件复制到 Hadoop HIVE。目前，我通过两步脚本执行此操作。

• 步骤 1：使用 Putty scp 工具将文件从 Windows 复制到 Linux 的 Powershell 脚本。

• 第 2 步：Bash 脚本使用 Hadoop put 命令将文件从 Linux 复制到 HDFS。

有没有办法只通过一个步骤来完成这个？

Answer 1

我想到了一个解决方案。我将 Windows 共享安装到 Linux 机器上，这样我就可以将 Windows 共享视为本地 Linux 路径，然后我将文件直接从该路径复制到 HDFS 位置。