Как обновить версию Apache Spark

В настоящее время я установил версию Spark 1.5.0 на AWS, используя скрипт spark-ec2.sh.

Теперь я хочу обновить свою версию Spark до 1.5.1. Как мне это сделать? Есть ли какая-либо процедура обновления или мне нужно собрать ее с нуля, используя скрипт spark-ec2? В этом случае я потеряю всю существующую конфигурацию.

Пожалуйста, порекомендуйте

Спасибо


apache-spark spark-ec2
person Kaushal    schedule 16.10.2015    source источник
comment
Проверьте мой ответ здесь относительно AWS.   -  person eliasah    schedule 16.10.2015
comment
@eliasah я не использую EMR и S3 на AWS   -  person Kaushal    schedule 16.10.2015

Ответы (1)


arrow_upward
0
arrow_downward

1.5.1 имеет идентичные поля конфигурации с 1.5.0, я не знаю никаких инструментов автоматизации, но обновление должно быть тривиальным. C/P $SPARK_HOME/conf должно быть достаточно. Тем не менее, сделайте резервную копию старых файлов.

person mehmetminanc    schedule 16.10.2015
comment
да, хорошо, но скрипт spark-ec2.sh выполнил дополнительную настройку для Spark на AWS. Итак, как я собрал искру из исходников, не зная всех настроек и конфигурации. - person Kaushal; 16.10.2015