Versions (relevant - OpenSearch/Dashboard/Server OS/Browser):
I use the latest versions of both data prepper and fluent bit containers
Describe the issue:
У меня есть лог приложения и лог nginx файл с расширеием .log. Так же у меня поднято два экземпляра приложения, для тестового и боевого сервера. Подскажите как мне написать пайплайн так чтобы я разделял все эти логи в отдельные индексы, сейчас написано только для одного экземпляра самаприложения . Для пересылки используется fluent-bit
Configuration:
fluent-bit.conf
[INPUT]
name tail
refresh_interval 5
path /var/log/log.log
read_from_head true
Tag prod_log
[OUTPUT]
Name http
Match *
Host opensearch.tech
Port 2021
URI /log/ingest
Format json
pipelines.yaml
opensearch-pipeline:
source:
http:
ssl: false
port: 2021
sink:
- stdout:
- opensearch:
hosts: [ “http://opensearch:9200” ]
insecure: true
username: “admin”
password: “123456”
index: api_logs
Relevant Logs or Screenshots: