web-dev-qa-db-ja.com

JMS / ActiveMQでの重複メッセージの回避

ActiveMQサーバーで定義されたキューで重複するメッセージを抑制する方法はありますか？

JMSMessageID（message.setJMSMessageID（ "uniqueid"））を手動で定義しようとしましたが、サーバーはこの変更を無視し、生成されたJMSMessageIDが組み込まれたメッセージを配信します。

仕様により、メッセージの重複排除方法に関するリファレンスは見つかりませんでした。

HornetQでは、この問題に対処するために、メッセージ定義でHQ固有のプロパティorg.hornetq.core.message.impl.HDR_DUPLICATE_DETECTION_IDを宣言する必要があります。

つまり：

Message jmsMessage = session.createMessage();
String myUniqueID = "This is my unique id"; // Could use a UUID for this
message.setStringProperty(HDR_DUPLICATE_DETECTION_ID.toString(), myUniqueID);

ActiveMQに同様のソリューションがあるかどうか誰かが知っていますか？

javaduplicatesjmsactivemqmom
20
Andre Pastore

Apache Camelを見る必要があります。これは、任意のJMSプロバイダーで動作するべき等コンシューマーコンポーネントを提供します。以下を参照してください。 http://camel.Apache.org/idempotent-consumer.html

これをActiveMQコンポーネントと組み合わせて使用​​すると、JMSの使用が非常に簡単になります。 http://camel.Apache.org/activemq.html を参照してください。

7
Tim Bish

ActiveMQがネイティブでサポートしているかどうかは疑問ですが、べき等のコンシューマーを実装するのは簡単なはずです。これを行う方法は、プロデューサー側で各メッセージに一意の識別子を追加することです。現在、ストア（db、キャッシュなど）を使用してコンシューマー側で、メッセージが以前に受信されたかどうかを確認するためのチェックを行うことができます。そのチェックに基づいて処理を続行します。

同じ行に沿って以前のstackoverflowの質問が表示されます- Apache ActiveMQ 5.3-重複メッセージを拒否するようにキューを構成する方法は？ 、これも役立つ場合があります。

5
Biju Kunjummen

ActiveMQトランスポートにベイクされた重複メッセージを削除するためのサポートが追加されました。 接続構成ガイド の構成値auditDepthおよびauditMaximumProducerNumberを参照してください。

4
Chris Pitman

ActiveMQを作成して、JMSプロパティに基づいて重複をフィルタリングする方法があります。 Activemq Plugin の記述が含まれます。重複メッセージをデッドレターキューに送信する基本的なブローカーフィルターは次のようになります

import Java.util.List;
import Java.util.regex.Matcher;
import Java.util.regex.Pattern;

import org.Apache.activemq.broker.Broker;
import org.Apache.activemq.command.Message;
import org.Apache.activemq.command.ActiveMQMessage;
import org.Apache.activemq.broker.BrokerFilter;
import org.Apache.activemq.broker.ConnectionContext;
import org.Apache.activemq.command.ConnectionInfo;
import org.Apache.activemq.broker.ProducerBrokerExchange;

public class DuplicateFilterBroker extends BrokerFilter {
    String messagePropertyName;
    boolean switchValue;

    public DuplicateFilterBroker(Broker next, String messagePropertyName) {
        super(next);
        this.messagePropertyName = messagePropertyName;
    }

    public boolean hasDuplicate(String propertyValue){
        switchValue = propertyValue;
        return switchValue;
    }

    public void send(ProducerBrokerExchange producerExchange, Message msg) throws Exception { 
        ActiveMQMessage amqmsg = (ActiveMQMessage)msg; 
        Object msgObj = msg.getMessage(); 
        if (msgObj instanceof javax.jms.Message) { 
            javax.jms.Message jmsMsg = (javax.jms.Message) msgObj; 
            if (!hasDuplicate(jmsMsg.getStringProperty(messagePropertyName))) {
                super.send(producerExchange, msg);
            }
            else {
               sendToDeadLetterQueue(producerExchange.getConnectionContext(), msg);
            } 
        }
    }  
}
3
Monachus

質問で提案されている方法のようですが、ActiveMQでも機能します（2016/12）。 activemq-artemis ガイドを参照してください。これには、プロデューサーが特定のプロパティをメッセージに設定する必要があります。

Message jmsMessage = session.createMessage();
String myUniqueID = "This is my unique id";   // Could use a UUID for this
message.setStringProperty(HDR_DUPLICATE_DETECTION_ID.toString(), myUniqueID);

ただし、プロパティを含むクラスは異なります：org.Apache.activemq.artemis.core.message.impl.HDR_DUPLICATE_DETECTION_IDそしてプロパティ値は_AMQ_DUPL_ID。

0
Gab