O Filebeat nos permite não ter que ler o dado diretamente do disco, isso é muito bom a nível de produção, pois em algumas empresas cada servidor está em um lugar diferente, isso é facilmente resolvido com o Filebeat, pois por ele consigo configurar a saída dos meu dados para um outro servidor, como no nosso caso é o mesmo não precisaremos, mas vou falar como ficaria caso eu decidir enviar os dados para outro server.

filebeat.yml

Dentro do diretório "./filebeat" do repositório, podemos encontrar o arquivo: "filebeat.yml", ele vai ter mais ou menos esta aparência: Prospectors são um ou mais paths de arquivos que o filebeat ficara acompanhando em busca de mudanças para enviar para o logstash. Cada paths possui parâmetros adicionais como document_type que é referente ao type do Elasticsearch onde o log será salvo.

Na linha 5, estamos dizendo que tudo que for .csv na no diretório "/var/log/" do container vai ser do tipo "csv" e irá fazer scan no file a cada 10 segundos.

Já na linha 11 é onde eu declaro por onde esses dados vão sair! Como eu havia dito antes é nesta parte que podemos decidir para onde enviar nossos dados, seja localmente ou remotamente... Onde diz: " hosts: ["logstash:5044"] ", Eu poderia ter configurado com o ip de um outro host, para a porta 5044 que vai ser por onde o Logstash vai "ouvir", no meu caso está "logstash" que é o nome da mascara de rede de um container!

Mais abaixo é configurado o Logging onde configuramos o rotacionamento dos logs, o level que por padrão é warning e os seletores que no meu caso é todos!

Com isso configurado já podemos passar para o Logstash, que é a parte mais legal de toda a stack ELK!