API Streams Apache Kafka против потоковой передачи Spark

Я сравниваю пропускную способность потоковой передачи искр и потоков Kafka. Мои результаты показывают, что у Kafka Streams более высокая пропускная способность, чем у потоковой передачи Spark. Это верно? Разве не должно быть наоборот?

Спасибо


person InfamousCoder    schedule 16.11.2017    source источник
comment
dzone.com/articles/spark-streaming-vs-kafka-stream- 1   -  person shakeel    schedule 16.11.2017
comment
codelook.com/   -  person Matthias J. Sax    schedule 16.11.2017


Ответы (1)


Ни одна потоковая платформа не может быть быстрее всех остальных для каждого случая использования. Не дайте себя обмануть результатами тестов, которые сравнивают яблоки с апельсинами (например, чтение Kafka Streams из источника на диске или чтение Spark Streaming из источника в памяти). Вы не опубликовали свой тест, но вполне возможно, что он представляет собой вариант использования (и тестовую среду), в котором Kafka Streams действительно работает быстрее.

person Hans Jespersen    schedule 16.11.2017