Я пытаюсь записать pyspark DataFrame в Redshift, но это приводит к ошибке: - java.util.ServiceConfigurationError: org.apache.spark.sql.sources.DataSourceRegister: Provider org.apache.spark.sql.avro.AvroFileFormat не может быть создан Вызвано:...

Мне нужно подключить искру к моему экземпляру красного смещения для генерации данных. Я использую Spark 1.6 со scala 2.10. Использовали совместимый разъем jdbc и разъем искрового красного смещения. Но я столкнулся со странной проблемой: я использую...