Вопросы по теме 'sparkling-water'

H2o Количество исполнителей не работает
Я запускаю искрящуюся оболочку следующей командой. ./bin/sparkling-shell --num-executors 4 --executor-memory 4g --master пряжа-клиент У меня бывает только два исполнителя. Это проблема H2o, YARN или Spark? Майк
206 просмотров
schedule 29.09.2021

Невозможно переименовать имена столбцов таблиц Spark в sparklyr / rsparkling
По колено с sparklyr / rsparkling, у меня есть несколько таблиц Spark с раздражающими именами столбцов, и я хотел бы их переименовать. Но я не могу этого сделать. library(sparklyr) library(rsparkling) library(dplyr) library(DBI) sc <-...
136 просмотров
schedule 13.10.2021

невозможно создать H2OContext в Databricks - с помощью pysparkling
Я не могу создать H2OContext в Spark Databricks - используя pysparkling. Это дает следующую ошибку. Код: из pysparkling import * Код: import h2o Код: h2oConf = H2OConf (spark) Код: h2oConf.set ("spark.ui.enabled", True) Out [2]: конфигурация...
240 просмотров

Как встроить пользовательские графики в пользовательский интерфейс потока H2O в Scala или R?
После некоторого расследования я обнаружил, что пользовательский интерфейс потока газированной воды H2O имеет очень ограниченный набор графиков - только диаграммы Box и распределения для визуализации данных в Scala. Но если я хочу использовать...
68 просмотров
schedule 12.08.2022

Газированная вода - запустить скрипт Python как приложение Spark.
У меня проблемы с Sparkling Water для запуска скрипта Python в качестве приложения Spark. Я использую эту команду для выполнения своего скрипта в Spark: ./bin/spark-submit \ --packages ai.h2o: газированная вода-core_2.10: 1.5.12 \...
767 просмотров
schedule 25.02.2023

Строка ввода слишком длинная - Spark
Я получаю следующую ошибку при выполнении sparkling-shell2.cmd файла bat. Я прошел и получаю эту ошибку при выполнении spark-shell.cmd со следующими параметрами cd %TOPDIR% %SPARK_HOME%/bin/spark-shell.cmd --jars...
488 просмотров
schedule 19.12.2022

Ошибка газированной воды H2O из большого фрейма данных Spark в фрейм данных H2O
Когда я пытаюсь преобразовать из искрового фрейма данных в фрейм данных H2O, я получаю ошибку ниже. Похоже, это связано с размером фрейма данных, потому что, когда я делаю его меньше, преобразователь между искрой и H2O работает хорошо. Есть ли...
499 просмотров

Странные трассировки при выключении контекста Sparkling Water
Для воспроизведения используйте простейший пример Python с газированной водой ( https://github.com/h2oai/sparkling-water/blob/rel-2.2/py/examples/scripts/H2OContextInitDemo.py ): from pysparkling import * from pyspark.sql import SparkSession...
264 просмотров
schedule 08.07.2023

Получите расстояние от точки до центроида кластера в H2o KMEANS Clustering
В кластере H2O KMeans. есть ли способ рассчитать фактические расстояния от центроидов кластера для каждой точки в наборе данных? В настоящее время H2o дает прогнозируемый кластер для переданных данных, но как лучше всего получить расстояние точки от...
484 просмотров

Есть ли способ экспортировать результаты перекрестной проверки папок N в фрейм данных?
Я использую газовую воду H2O для создания модели GBM. Я знаю, что мы можем просмотреть результаты перекрестной проверки папки N, используя приведенный ниже код: gbm_model.model_performance(xval = True) Но есть ли способ сохранить...
123 просмотров
schedule 05.05.2024