У меня есть конвейер данных AWS, в котором я пытаюсь выполнить шаг, код которого находится в JAR, расположенном в корзине S3. Я указываю путь и имя класса, но в журналах конвейера написано «Предупреждение: пропустить удаленную банку», и мой код никогда не выполняется. Тело моего шага:
command-runner.jar,spark-submit,--deploy-mode,cluster,--master,yarn,--class,com.myorg.myapp.MyClass,s3://MyBucket/my-jar.jar,myArg
Теперь в документации говорится, что Я могу запустить код в удаленной банке, но это не так? Кто-нибудь испытал это и сделал эту работу?
