Я могу отправить задание Spark через spark-submit, однако, когда я пытаюсь сделать то же самое программно с помощью SparkLauncher, это ничего мне не дает (я даже не вижу задание Spark в пользовательском интерфейсе) Ниже приведен сценарий: У меня...

Я отправляю свои задания в искровой кластер (с YARN) программно с помощью Java-приложения и Spark Launcher (запуская задание с помощью startApplication(), а не запуска()). Мне нравится иметь весь вывод журнала, который создается на stdout и stderr...

Я хочу запустить задание Spark из веб-приложения Javaee, но SparkLauncher запущен без исключения, а в кластере Spark не запущено ни одно задание. Кто-нибудь может помочь? public static void runJob(String userId) throws Exception { long...

Мне нужно запустить задание Spark из потока, запущенного из веб-приложения, работающего на Liberty (17.0.0.2). Это развернуто в контейнере Docker. Я могу заставить это работать, запустив задание spark (2.2.0) через сценарий spark-submit,...