2017-10-24 10 views
0

tcp接続でsyslog-ngにログを取得しようとしています。ログは次のようになります。TCP /ネットワークモジュール上のSyslog-ngマルチライン入力

1810717353--user--notice--IPV4----2017-10-23T16:03:23.015170-04:00--<11>Oct 23 16:03:23 HOSTNAME [443-Multiplexer][0x80000001][xsltmsg][error] xmlfirewall(443-Multiplexer): trans(2607607975)[error][ip] gtid(value): 
1810717354--user--notice--IPV4----2017-10-23T16:03:23.015170-04:00--     Default rule caught error code ' 
1810717355--user--notice--IPV4----2017-10-23T16:03:23.015170-04:00--     0x00230001 
1810717356--user--notice--IPV4----2017-10-23T16:03:23.015170-04:00--     ' 
1810717357--user--notice--IPV4----2017-10-23T16:03:23.015170-04:00-- 
1810717358--user--notice--IPV4----2017-10-23T16:03:23.015170-04:00--<14>Oct 23 16:03:23 HOSTNAME [443-Multiplexer][value][multistep][info] xmlfirewall(443-Multiplexer): trans(2607607975)[error][ip] gtid(2607607975): 

入力中にsyslogヘッダーを取り除く方法はありますか?ログが複数行のまま残っている場合は、読み込み中にそれらをlogstashでパッケージ化することができますが、ファイルに書き込むときにログにヘッダーを持たせる必要があります。

ここに私の現在のsyslog-ng設定:

@version: 3.6 
#@include "scl.conf" 

options { 
     flush_lines (0); 
     frac-digits(8); 
     use-rcptid (yes); 
     time_reopen (10); 
     log_fifo_size (1000); 
     chain_hostnames (off); 
     use_dns (no); 
     use_fqdn (no); 
     create_dirs (no); 
     keep_hostname (yes); 
     use-rcptid (yes); 
     threaded(yes); 
     log_msg_size(32768); 
}; 
    source sourcename 
    { 
     network(ip("0.0.0.0") port(5521) flags(no-parse)); 
    }; 
    destination destname 
    { 
     file("/opt/elk/data/syslogs/datapower/${HOST}.log" 
      #follow-freq(0) multi-line-mode(regexp) multi-line-prefix("^\<\[0-9]{2}\>[A-z]{3} [0-9]{2} [0-9]{2}\:[0-9]{2}\:[0-9]{2}") 
      create_dirs(yes) dir_owner("elkuser") dir_group("users") dir_perm(0700) 
      owner("user") group("group") perm(0600) 
      template("${RCPTID}--$FACILITY--$PRIORITY--$FULLHOST--$PROGRAM--$ISODATE--${MSGHDR}${MSG}\n") 
     ); 
    }; 

おかげ

答えて

0

私は、あなたがメッセージを分割したい場所がわからないんだけど、それに応じて、次の操作を実行できます。

また、それはあなたが何とかElasticsearchにログを送信しているようです(少なくとも私はそれが目的地でのヘラジカが何の略かだ疑いがある):のsyslog-ngの最近のバージョンは、直接それを行うことができます:https://www.balabit.com/documents/syslog-ng-ose-latest-guides/en/syslog-ng-ose-guide-admin/html/configuring-destinations-elasticsearch2.html

HTH、 ロバート

関連する問題