Вопросы по теме 'ray'
Куда импортировать тензорный поток с помощью актеров лучей?
Используя акторы лучей для параллельного запуска нескольких моделей тензорного потока, я спрашиваю себя, куда импортировать тензорный поток:
# [1] maybe import tensorflow here?
@ray.remote(num_cpus=1)
class Remote_Runner:
# [2] maybe import...
287 просмотров
schedule
05.09.2021
Отклик с низкой задержкой при использовании Ray на большом (isch) наборе данных
TL;DR
Какой самый быстрый способ получить почти нулевое время загрузки для набора данных pandas, который у меня есть в памяти, с помощью ray?
Фон
Я делаю приложение, которое использует полу-большие наборы данных (фреймы данных pandas от 100...
148 просмотров
schedule
09.12.2021
Каким образом «удаленные функции» и «удаленные акторы» выполняются распределенным образом под капотом в библиотеке лучей?
Мне интересно понять, как remote functions и remote actors выполняются распределенным образом под капотом в ray библиотека. Я проследил код, начинающийся с ray.remote , до следующих строк:
Для функций:...
49 просмотров
schedule
29.09.2021
Недостаточно памяти при каждой второй попытке использования Ray Tune
Я настраиваю гиперпараметры, используя настройку лучей. Модель построена в библиотеке tensorflow, занимает большую часть доступной памяти GPU. Я заметил, что каждый второй вызов сообщает об ошибке нехватки памяти. Похоже, что память освобождается,...
274 просмотров
schedule
19.10.2021
Рабочие группы не используются из-за ошибки автомасштабирования
Эта проблема связана с предыдущим вопросом Статус рабочего узла в кластере Ray EC2: обновление не выполнено ; при использовании Ray для кластера EC2. Кажется, что кластер использует только головной узел, несмотря на то, что в конфигурации указаны 2...
134 просмотров
schedule
23.02.2022
Статус рабочего узла в кластере Ray EC2: ошибка обновления
Теперь у меня есть кластер Ray, работающий на EC2 (Ubuntu 16.04) с главным узлом c4.8xlarge и одним идентичным рабочим. Я хотел проверить, используется ли многопоточность, поэтому я провел тесты, чтобы время увеличения числа (n) одной и той же...
182 просмотров
schedule
28.02.2022
не могу найти команду rllib после установки луча
Я хочу попробовать эту команду:
rllib train --env=Pong-ram-v4 --run=PPO
но rllib не может найти, я могу сделать это, напрямую выполнив train.py в исходном коде rllib, но запуск с помощью команды, безусловно, более элегантен. может...
369 просмотров
schedule
08.03.2022
Запуск луча с внешним Redis
Я настраиваю инфраструктуру для проекта Ray и хотел бы использовать внешний Redis (то есть тот, который не был запущен ray --head . Однако в настоящее время это не представляется возможным, что дает мне:
If --head is passed in, a Redis server...
106 просмотров
schedule
13.03.2022
Как настроить автомасштабирование проекта лучей на GCP
У меня возникли серьезные трудности с настройкой автоматического масштабирования лучей в облачных вычислениях Google. Я могу заставить его работать на AWS без проблем, но я продолжаю сталкиваться со следующей ошибкой при запуске ray up :...
473 просмотров
schedule
22.03.2022
Луч + cross_val_score
В настоящий момент я изучаю ray и заметил, что есть некоторая интеграция с scikit-learn. Мне было интересно, может ли кто-нибудь сказать мне, существует ли реализация луча cross_val_score ? Я знаю, что в Ray есть настройка гиперпараметров,...
31 просмотров
schedule
14.07.2022
Стандартный способ дождаться завершения всех задач перед выходом
Мне было интересно - есть ли простой способ дождаться завершения выполнения всех задач перед выходом, не отслеживая все ObjectID s (и get() ing их)? Вариант использования - когда я запускаю @remote s для сохранения вывода, например, когда нет...
329 просмотров
schedule
11.08.2022
Удаленные вызовы блокируются при использовании методов в объекте-актере?
Выполнение следующего не будет работать одновременно, вместо этого он сначала выполнит Run1 и заблокируется до завершения, прежде чем он выполнит Run2.
@ray.remote
class Test:
def __init__(self):
pass
def Run1(self):...
120 просмотров
schedule
06.08.2022
Использование Ray с Jupyterhub в кластере Kubernetes
Я создаю кластер Kubernetes с Jupyterhub и Ray и хочу, чтобы пользователи имели доступ к Jupyterhub и использовали кластер Ray на k8s. Мой план заключался в создании кластера Ray с использованием Ray API из записной книжки Jupyterhub "...
220 просмотров
schedule
23.08.2022
Не удается запустить кластер лучей на GCP из-за того, что колесо лучей не поддерживается
Я пытаюсь запустить кластер лучей на GCP с помощью файла YAML базовой конфигурации, но он не работает с ошибкой:
ray-1.1.0.dev0-cp38-cp38-manylinux2014_x86_64.whl is not a supported wheel on this platform
Я пробовал использовать разные колеса...
72 просмотров
schedule
20.09.2022
Ранняя остановка экспериментов с ray.tune при выполнении сложных условий?
Есть ли способ остановить ray.tune эксперименты (например, с использованием PBT), когда явно наблюдается переобучение или одна метрика не улучшалась в течение длительного времени?
191 просмотров
schedule
06.10.2022
Как именно Рэй передает данные работникам?
Существует множество простых руководств, а также SO-вопросов и ответов, в которых утверждается, что Рэй каким-то образом делится данными с работниками, но ни в одном из них не содержится точных сведений о том, что и как передается в какой ОС....
598 просмотров
schedule
27.07.2023
Как заставить Tune запускать параллельные испытания на нескольких графических процессорах?
Я надеюсь заставить Tune запускать каждую пробу поиска по сетке параллельно на нескольких графических процессорах. У меня есть машина с 4 GPU и 24 VCPU. Когда я запускаю следующий код, я вижу, что nvidia-smi использует 3 графических процессора, но...
1145 просмотров
schedule
14.11.2022
Ручное вычисление луча выбора луча мыши в проблеме вращения Java
У меня проблемы с завершением алгоритма выбора лучей мыши для игры, которую я создаю с использованием java (и opengl / lwjgl). Я реализовал трассировку лучей, вдохновившись здесь и здесь . Я следил за книгой lwjgl по реализации игры. Следующий...
135 просмотров
schedule
20.02.2023
Количество параллельно работающих процессов определяется количеством физических ЦП или количеством логических ЦП?
Вот информация о моем процессоре:
Я использую ray для обучения алгоритмов обучения с подкреплением, где я определяю Learner класс, украшенный @ray.remote(num_cpus=2) и Worker класс, награжденный ray.remote(num_cpus=1) . Сколько...
2661 просмотров
schedule
11.06.2023
Ошибка возникает при сохранении `ActorHandler` в другом актере для последующего использования.
Я хочу, чтобы удаленный класс сохранил другой удаленный класс, чтобы он мог вызывать его позже. В следующем коде приведен пример
import ray
ray.init()
@ray.remote
class Worker:
def __init__(self):
self.a = 1
self.l = None...
29 просмотров
schedule
16.07.2023
