Вопросы по теме 'apache-zeppelin'

Оценка Spark-Notebook
Я оценивал Spark Notebook и нашел три разных продукта; 1. Hue 3.9 поставляется с записной книжкой Spark (бета) 2. Apache zeppelin 3. andypetrella / spark-notebook. Не могли бы вы помочь мне понять плюсы и минусы каждого продукта? Спасибо, пани
4824 просмотров

Zeppelin и BigQuery
Я ищу движок для визуализации и аналитики для BigQuery , и меня интересует _2 _ / _ 3_. У нас есть внутренние возможности в Python и R , и мы хотим использовать их с нашим BigQuery сервером. Все сценарии установки, которые я видел до сих...
601 просмотров
schedule 20.10.2021

Spark 2.0 с Zeppelin 0.6.1 - SQLContext недоступен
Я использую spark 2.0 и zeppelin-0.6.1-bin-all на сервере Linux. Записная книжка искры по умолчанию работает нормально, но когда я пытаюсь создать и запустить новую записную книжку в pyspark с помощью sqlContext, я получаю сообщение об ошибке...
450 просмотров

Как добавить карты в Zeppelin?
Я пытаюсь следовать этому учебник, который более или менее работает для меня, но на последних скриншотах он выбрал значок карты в Zeppelin, которого у меня нет. Я не могу найти никакой помощи по установке поддержки карт для Zeppelin. Кто-нибудь...
552 просмотров
schedule 07.11.2021

Apache Zeppelin с Athena обрабатывает токен сеанса с помощью интерпретатора jdbc
Я пытаюсь подключить Афину к Apache Zeppelin . Мне нужно обработать secret_key, Access_key и Session_token. Мне трудно установить связь с интерпретатором Zeppelin JDBC. Я выполняю шаги, указанные в этом блоке , Если кто-нибудь может помочь мне...
362 просмотров

Ошибка при вызове REST API для обновления абзаца
Я использую версию Zeppelin 0.7.3. При попытке использовать вызов zeppelin REST API ( http://localhost:8080/api/notebook/2D8BSC25C/paragraph/20180211-213728_2111839943)in почтальоне, чтобы обновить абзац, я получаю ошибку "Метод не разрешен", хотя...
296 просмотров
schedule 13.10.2021

Запуск Zeppelin с https с использованием контекстной маршрутизации Nginx
У меня есть требование запускать службы (Zeppelin, grafana и т. Д.) С использованием https. Я установил сертификаты и добавил ниже конфигурацию в NGINX. Но все равно он не работает, дайте мне знать, если нужно добавить какую-либо другую...
321 просмотров
schedule 22.09.2021

Исключение нулевого указателя после добавления зависимости к интерпретатору Spark2
Я пытаюсь добавить эту зависимость к интерпретатору искры 2 в zeppelin https://mvnrepository.com/artifact/org.apache.spark/spark-sql_2.11/2.2.0 Однако после добавления зависимости я получаю исключение нулевого указателя при запуске любого...
159 просмотров

Zeppeling выбрасывает исключение NullPointerException при настройке
Я пытаюсь установить zeppelin-0.8.0 на свою ОС Windos 8 R2. У меня уже есть искра на моей консоли, то есть SPARK_HOME и JAVA_HOME, HADOOP_HOME настроены и работают нормально. Но пока я пытаюсь выполнить printl ("hello") в интерпретаторе zeppelin...
1274 просмотров
schedule 24.11.2021

zeppelin java.lang.OutOfMemoryError: превышен предел накладных расходов GC
Я получаю сообщение об ошибке zeppelin org.apache.spark.SparkException: задание прервано с описанием Причина: java.lang.OutOfMemoryError: превышен предел накладных расходов сборщика мусора . Мониторинг Spark показал, что сборщик мусора занимает...
2178 просмотров

Как настроить Apache Spark и Zeppelin на Docker
Я пытаюсь настроить среду разработки Spark с Zeppelin на Docker, но у меня возникают проблемы с подключением контейнеров Zeppelin и Spark. Я развертываю Docker Stack с текущим docker-compose version: '3' services: spark-master: image:...
2854 просмотров

Карта Spark Scala не работает с пользовательской функцией
Я пытаюсь запустить пользовательскую функцию параллельно с некоторыми параметрами, хранящимися в RDD, в spark scala. Я предполагаю, что использование карты должно дать результат. Я получаю сообщение об ошибке при передаче определенной мной...
163 просмотров
schedule 08.11.2021

Динамическая установка пароля JDBC в Apache Zeppelin
Можно ли динамически установить default.password, например. из файла? Мы успешно подключили Presto к Zeppelin с помощью коннектора JDBC, однако мы используем другой метод аутентификации, который требует от нас обновлять пароль каждый день. Я...
78 просмотров
schedule 23.09.2021

Могу ли я программно проверить статус абзаца в Zeppelin?
Я использую Zeppelin с Hadoop в кластере Spark. Я хочу проверить статус абзаца, чтобы узнать, SUCCESS, RUNNING, NOT RUN OR ERROR. Я знаю, что могу прокрутить до абзаца и прочитать работу в правом верхнем углу. Могу ли я программно проверить...
219 просмотров
schedule 13.11.2021

Почему кэширование небольших RDD Spark требует большого объема памяти в Yarn?
Кэшированные RDD (всего 8) невелики, всего около 30 ГБ , однако в пользовательском интерфейсе Hadoop это показывает, что приложение Spark занимает много памяти (активные задания не выполняются), т.е. 1,4T , почему так много? Почему он...
162 просмотров
schedule 18.11.2021

Почему я не могу использовать интерпретатор искр в цеппелине?
На картинке оказалось, что я могу использовать интерпретатор python, но не искру. Понятия не имею почему. Пожалуйста, помогите мне. Я совершенно потерялся. Вот командное окно zeppelin Мой код просто 1 + 1, чтобы проверить, могу ли я запустить...
45 просмотров
schedule 27.02.2022

Есть ли способ использовать Spark SQL Connector в Zeppelin Notebook?
Я хочу использовать Spark SQL Connector для чтения и записи данных на SQL Server. В качестве доказательства концепции я подумал об использовании записной книжки zeppelin для выполнения этой задачи. Я могу загрузить зависимость, используя следующую...
113 просмотров
schedule 03.03.2022

Ошибка Apache Zeppelin `` Не удалось запустить узел Ignite '' при интеграции с Ignite
Я открываю для себя Apache Ignite и создаю простое приложение, похожее на их пример подсчета слов. Он передает слова из нескольких файлов .txt в кеш. И я могу запросить эти слова с помощью класса SqlFieldsQuery в приложении Java. public class...
183 просмотров
schedule 06.03.2022

Истекло время тактового сигнала исполнителя: ошибка в задании Spark
Я получаю сообщение об ошибке ниже в Spark Job с использованием программирования Python. В сообщении об ошибке написано: «Истекло время сердцебиения исполнителя». Журнал ошибок прилагается ниже: Py4JJavaError: An error occurred while calling...
487 просмотров

Apache Zeppelin, работающий при искре, происходит java ConnectionException
Я хочу задать вопрос об использовании установки appache-zeppelin. Я скачал zeppelin-0.5.5-incubating-bin-all настройте экспорт JAVA_HOME = / sparkDemo / java-1.8.0-openjdk в zeppelin-env.sh и zeppelin.server.port 8084 в zeppelin-site.xml. Я не...
378 просмотров
schedule 13.04.2022