Como atualizo os dados do Logstash para o Redshift em tempo real?

Como atualizo os dados do Logstash para o Redshift em tempo real?

Estou procurando uma maneira de construir um pipeline para armazenar os dados de log (eu uso a pilha ELK) no AWS Redshift, para análise.

Examinei os plug-ins de saída do ElasticSearch eAchei umpara gravar dados no AWS S3. Porém, ele grava dados em lotes e lidar com o S3 é lento.

Então, há alguma maneira de construir um pipeline da minha pilha ELK para o Redshift para meus dados de log?

Atualização: o cluster de pilha ELK está hospedado em uma VPC EC2

informação relacionada