EIP / Apache Camel - как обрабатывать сообщения одновременно, но атомарно для каждой группы?

У меня такая ситуация:

  • Есть фиксированное количество групп.
  • Есть TCP поток входящих сообщений. Каждое сообщение относится ровно к одной группе.

Я начинаю маршрут Camel следующим образом:

public class MyMessage implements Runnable {
    public void run() {
        // omitted here
    }
}

from("netty:tcp://localhost:7777?textline=true&sync=false")
   ... // omitted here: parse message to pojo MyMessage, set header "group-identifier"
   .to(seda:process);

Этот маршрут Camel потребляет поток TCP, анализирует и преобразует полезную нагрузку каждого входящего сообщения в MyMessage pojo и устанавливает заголовок group-identifier на обмене, который соответствует сообщению ...

Теперь я хочу использовать seda:process следующим образом:

  • Сообщения, принадлежащие одной группе, не могут выполняться одновременно.
  • Сообщения, принадлежащие к разным группам, могут выполняться одновременно.
  • Каждое сообщение должно выполняться путем вызова run(). Я хочу предоставить / определить для этого ExecutorService, чтобы я мог контролировать количество потоков.

Какие шаблоны интеграции предприятия я могу применить здесь? Как я могу сопоставить эти концепции с Camel?

Я узнал, что в ActiveMQ есть концепция групп сообщений (http://activemq.apache.org/message-groups.html). Это может обеспечить способ гарантировать, что два сообщения одной и той же группы никогда не будут выполняться одновременно. Хотя я не уверен, что внедрение ActiveMQ только для этого не будет излишним. Можно ли этого также достичь с помощью «основного» Camel / Java?


java architecture concurrency apache-camel enterprise-integration
person Community    schedule 14.12.2018    source источник

Ответы (1)


arrow_upward
2
arrow_downward

Сделать это в ActiveMQ довольно просто. Следующий фрагмент кода имитирует выполнение сообщений по мере необходимости:

  • Сообщения, принадлежащие одной группе, выполняются последовательно.
  • Сообщения, принадлежащие к разным группам, выполняются одновременно.

Это зависит от групп сообщений ActiveMQ, как описано в http://activemq.apache.org/message-groups.html.

final CamelContext context = new DefaultCamelContext();

context.addComponent("activemq", ActiveMQComponent.activeMQComponent("vm://localhost?broker.persistent=false"));
context.addRoutes(new RouteBuilder() {
    @Override
    public void configure() {
        from("activemq:queue:q?concurrentConsumers=5")
                .process(exchange -> {
                    System.out.println(Thread.currentThread() + " - " + exchange.getIn().getBody());
                    Thread.sleep(5000);
                });
    }
});
context.start();

for (int i = 0; i < 1000; ++i) {
    context.createFluentProducerTemplate()
            .withBody("This is a message from group : " + (i % 5))
            .withHeader("JMSXGroupID", "" + (i % 5))
            .to("activemq:queue:q")
            .send();
}

Тем не менее, мне (все еще) интересно, можно ли это сделать с чистым EIP / Camel-core.

person Community    schedule 15.12.2018