2016-12-08 19 views
0

JMSAppender log4j2を使用してログをActivMQに送信しようとしています。JMSAppenderで2000メッセージ/秒を送信するlog4j2

私は次のconfその後

<?xml version="1.0" encoding="UTF-8"?> 
<Configuration monitorInterval="5"> 
    <Appenders> 
     <Console name="STDOUT" target="SYSTEM_OUT"> 
      <PatternLayout 
       pattern="%d{HH:mm:ss.SSS} %highlight{[%-5p] %c{1.} - %m} %style{(%t)}{Cyan}%n" /> 
     </Console> 
     <RollingFile name="fish" fileName="E:/fish/log/fish.server/fish.log" 
      filePattern="/log/fish.server/fish-%-d{yyyy-MM-dd-HH}.log"> 
      <PatternLayout pattern="%-d{yyyy-MM-dd HH:mm:ss.SSS} %5p %c{1} - %m%n" /> 
      <Policies> 
       <TimeBasedTriggeringPolicy /> 
      </Policies> 
     </RollingFile> 

     <JMS name="jmsQueue" destinationBindingName="logQueue" 
      factoryName="org.apache.activemq.jndi.ActiveMQInitialContextFactory" 
      factoryBindingName="ConnectionFactory" providerURL="tcp://xxxxxx:61616"> 
      <PatternLayout pattern="%-d{yyyy-MM-dd HH:mm:ss.SSS} %5p %c{1} - %m%n" /> 
     </JMS> 

    </Appenders> 
    <Loggers> 

     <Logger name="jmsLogger" level="warn"> 
      <AppenderRef ref="jmsQueue" /> 
     </Logger> 

     <Root level="warn"> 
      <!-- <AppenderRef ref="STDOUT" /> --> 
      <AppenderRef ref="fish" /> 
     </Root> 
    </Loggers> 
</Configuration> 

を行っている、私はいくつかのスタッフを行い、その後、jmsLogger.warn(XXXX)を使用streamExecutorの32のスレッドを持っています。

私は私のアプリのためのスレッドダンプを行っている、と私は、次のブロックのスタッフに気づいた:?

"Log4j2-AsyncLogger[[email protected]]1" - Thread [email protected] 
    java.lang.Thread.State: WAITING 
    at sun.misc.Unsafe.park(Native Method) 
    - parking to wait for <324492ea> (a java.util.concurrent.locks.AbstractQueuedSynchronizer$ConditionObject) 
    at java.util.concurrent.locks.LockSupport.park(LockSupport.java:175) 
    at java.util.concurrent.locks.AbstractQueuedSynchronizer$ConditionObject.await(AbstractQueuedSynchronizer.java:2039) 
    at java.util.concurrent.ArrayBlockingQueue.take(ArrayBlockingQueue.java:403) 
    at org.apache.activemq.transport.FutureResponse.getResult(FutureResponse.java:40) 
    at org.apache.activemq.transport.ResponseCorrelator.request(ResponseCorrelator.java:87) 
    at org.apache.activemq.ActiveMQConnection.syncSendPacket(ActiveMQConnection.java:1366) 
    at org.apache.activemq.ActiveMQConnection.syncSendPacket(ActiveMQConnection.java:1305) 
    at org.apache.activemq.ActiveMQSession.send(ActiveMQSession.java:1795) 
    - locked <1af6596a> (a java.lang.Object) 
    at org.apache.activemq.ActiveMQMessageProducer.send(ActiveMQMessageProducer.java:277) 
    at org.apache.activemq.ActiveMQMessageProducer.send(ActiveMQMessageProducer.java:212) 
    at org.apache.activemq.ActiveMQMessageProducerSupport.send(ActiveMQMessageProducerSupport.java:241) 
    at org.apache.logging.log4j.core.appender.mom.JmsAppender.append(JmsAppender.java:65) 
    at org.apache.logging.log4j.core.config.AppenderControl.tryCallAppender(AppenderControl.java:155) 
    at org.apache.logging.log4j.core.config.AppenderControl.callAppender0(AppenderControl.java:128) 
    at org.apache.logging.log4j.core.config.AppenderControl.callAppenderPreventRecursion(AppenderControl.java:119) 
    at org.apache.logging.log4j.core.config.AppenderControl.callAppender(AppenderControl.java:84) 
    at org.apache.logging.log4j.core.config.LoggerConfig.callAppenders(LoggerConfig.java:390) 
    at org.apache.logging.log4j.core.config.LoggerConfig.processLogEvent(LoggerConfig.java:375) 
    at org.apache.logging.log4j.core.config.LoggerConfig.log(LoggerConfig.java:359) 
    at org.apache.logging.log4j.core.config.AwaitCompletionReliabilityStrategy.log(AwaitCompletionReliabilityStrategy.java:79) 
    at org.apache.logging.log4j.core.async.AsyncLogger.actualAsyncLog(AsyncLogger.java:310) 
    at org.apache.logging.log4j.core.async.RingBufferLogEvent.execute(RingBufferLogEvent.java:149) 
    at org.apache.logging.log4j.core.async.RingBufferLogEventHandler.onEvent(RingBufferLogEventHandler.java:45) 
    at org.apache.logging.log4j.core.async.RingBufferLogEventHandler.onEvent(RingBufferLogEventHandler.java:29) 
    at com.lmax.disruptor.BatchEventProcessor.run(BatchEventProcessor.java:129) 
    at java.util.concurrent.ThreadPoolExecutor.runWorker(ThreadPoolExecutor.java:1142) 
    at java.util.concurrent.ThreadPoolExecutor$Worker.run(ThreadPoolExecutor.java:617) 
    at java.lang.Thread.run(Thread.java:745) 

そこで問題は、送信モードがsynchroneである理由、あるorg.apache.activemq.ActiveMQConnection.syncSendPacket 。これにより、ブロッキングの問題が発生し、パフォーマンスが低下します。 Log4jの2.7のようThnksたくさん:)

答えて

1

、私はJMSアペンダを使用してログインするためのパフォーマンスのベンチマークを認識していないです。公開されたベンチマークのほとんどはファイルロギングのためのものです。 Log4j2はマルチスレッド・アプリケーションでも、と同期してファイルに800K msg/secを同期してに記録することができます。非同期ロギングは、バーストを処理するために複数回高速化することができます。

これに対し、2000 msg /秒は非常に高い数字のようではありません。私はそれがJMS実装ライブラリのスループットに依存すると推測しています。

+0

私はlog4j 2.6を使用してJMSAppenderを実装しようとしました。 lo4j 2.6が最新のディストリビューター・ライブラリーを使用しているので、パフォーマンスは非常に良いようです。私は0.125msで25Kのメッセージを送ることができます。これは私の質問に反応しています。私はちょうどいくつかの設定を欠場しています。この実装の目的は、ファイルに書き込むコストを回避し、この部分を他のプロセス(logstash elasticsearch kibana)に委譲することです。答えのThnks – user3021914

関連する問題