我正在尋找一種方法來建立管道,用於將日誌資料(我使用 ELK 堆疊)儲存到 AWS Redshift 以進行分析。
我已經瀏覽了 ElasticSearch 的輸出插件,並且找到一個用於將資料寫入AWS S3。但是,它批量寫入資料並且處理 S3 速度很慢。
那麼,有什麼方法可以為我的日誌資料建立從 ELK 堆疊到 Redshift 的管道嗎?
更新:ELK堆疊叢集託管在EC2 VPC上
我正在尋找一種方法來建立管道,用於將日誌資料(我使用 ELK 堆疊)儲存到 AWS Redshift 以進行分析。
我已經瀏覽了 ElasticSearch 的輸出插件,並且找到一個用於將資料寫入AWS S3。但是,它批量寫入資料並且處理 S3 速度很慢。
那麼,有什麼方法可以為我的日誌資料建立從 ELK 堆疊到 Redshift 的管道嗎?
更新:ELK堆疊叢集託管在EC2 VPC上