Posílání logů z AIX do Kafky

Posílání logů z AIX do Kafky
« kdy: 14. 10. 2019, 12:50:03 »
Zdravím,

zápolím s řešením jak číst logy na filesystemu v systému AIX a posílat přímo do kafka serveru. Neřešil někdo něco podobného?

Jediným řešením se mi jeví, posílat logy přes syslog na jiný server (s Linuxem), kde bude filebeat, který má podoru streamování do Kafky.
« Poslední změna: 14. 10. 2019, 20:54:52 od Petr Krčmář »


Re:z AIX(u) do Kafky
« Odpověď #1 kdy: 14. 10. 2019, 14:49:24 »
tohle https://github.com/edenhill/librdkafka lze při troše úpravy kompilovat i na AIX, čtení souboru je už otázka pár řádků v C.

Daleko častěji ale na AIX připojíme nfs (v3), na něj logy a z něj to čte linux.

kimec

Re:z AIX(u) do Kafky
« Odpověď #2 kdy: 14. 10. 2019, 16:29:57 »
Zdravím,

zápolím s řešením jak číst logy na filesystemu v systému AIX a posílat přímo do kafka serveru. Neřešil někdo něco podobného?

Jediným řešením se mi jeví, posílat logy přes syslog na jiný server (s Linuxem), kde bude filebeat, který má podoru streamování do Kafky.
Z cistej kuriozity, mozem sa spytat, aky use case riesite?
Preco potrebujete posielat logy zrovna do Kafky?


Re:Posílání logů z AIX do Kafky
« Odpověď #3 kdy: 15. 10. 2019, 12:47:10 »
Zkus testnout logstash, ten by to mel umet.

Re:z AIX(u) do Kafky
« Odpověď #4 kdy: 16. 10. 2019, 16:05:56 »
tohle https://github.com/edenhill/librdkafka lze při troše úpravy kompilovat i na AIX, čtení souboru je už otázka pár řádků v C.

Daleko častěji ale na AIX připojíme nfs (v3), na něj logy a z něj to čte linux.

Díky... beru to jako alternativní možnost. :)