我正在寻找一种方法来构建一个管道,用于将日志数据(我使用 ELK 堆栈)存储到 AWS Redshift,以进行分析。
我已经了解了 ElasticSearch 的输出插件,并且找到了一个用于将数据写入 AWS S3。但是,它是批量写入数据的,处理 S3 的速度很慢。
那么,有没有什么方法可以构建一条从我的 ELK 堆栈到 Redshift 的管道来传输我的日志数据?
更新:ELK 堆栈集群托管在 EC2 VPC 上
我正在寻找一种方法来构建一个管道,用于将日志数据(我使用 ELK 堆栈)存储到 AWS Redshift,以进行分析。
我已经了解了 ElasticSearch 的输出插件,并且找到了一个用于将数据写入 AWS S3。但是,它是批量写入数据的,处理 S3 的速度很慢。
那么,有没有什么方法可以构建一条从我的 ELK 堆栈到 Redshift 的管道来传输我的日志数据?
更新:ELK 堆栈集群托管在 EC2 VPC 上