Montando Stack de logs com Elasticsearch, Kibana e Filebeat com Helm скачать в хорошем качестве

Montando Stack de logs com Elasticsearch, Kibana e Filebeat com Helm

Fala pessoal, tudo certo? Bom, então bora subir uma stack de Observabilidade centralizando alguns logs do cluster utilizando o famoso Elasticsearch juntamente com o Kibana e o Filebeat maroto fazendo a captura dos logs. Quando utilizamos o Elastic é nada mais nada menos que a criação de um controlador dentro do cluster kubernetes que na verdade torna-se um recurso para fazer parte de determinada solução que esta rodando no cluster onde esse recurso consegue armazenar vários tipos de logs. Podemos ter vários Elasticsearchs e vários Kibanas dentro de um cluster Kubernetes tomando conta de determinada solução, mas em um cenário que tenha disponível um Cluster dedicado só para essa Stack seria bem maroto em... Bom, resumindo o cenário de hoje… Utilizei o Helm para adicionar os Repositorios para o elastic e posteriormente configuro e provisiono cada um deles: Elastic, Kibana e por final o Filebeat que age como um Daemonset coletando tudo que esta em /var/logs/containers direcionando esses logs para dentro do Elasticsearch gerando alguns metadatas que posteriormente consigo realizar filtros como por exemplo: Pods, Namespace e vários outros metadatas. Ah, tambem acessei o Kibana e configurei para receber os logs vindos do Filebeat e até testei algumas requisições ali no meu Jenkins que já estava rodando no cluster. Obs: Para guardar esses logs seria legal por exemplo utilizar e configurar um Volume de Storage que seja SSD, devido a alta taxa de geração de logs que o Elastic consegue lidar, lembrando que estamos trabalhando com grande quantidades de dados, então tem que ser bem estudado para ser armazenado de forma rápida e sem gargalos.