SWARM FTP 批处理的替代品？

Question

在拟议的项目中，计划将大型数据集分成块，通过 SFTP 将它们公开到群 CPU 类型的 LAN 集群架构中，以处理模拟的历史数字和财务数据。耗时。

使用 Influxdb 之类的东西怎么样？我对共享和扩展略知一二。我们能否利用这一点，了解它如何将数据分发到节点并对其进行处理？

Answer 1

您还有其他要求吗？有多种工具可以实现这一点，这里是一些可以分配工作负载的作业调度程序的列表（有些是开源的）

例如：

• 您的基础设施规模是多少？
• 您有任何安全要求吗？
• 您是否需要与其他解决方案紧密集成？
• ETC。