Относится к облаку AZure
Пакетная обработка будет выполняться ежедневно и должна: ✑ Масштабироваться для минимизации затрат ✑ Мониторинг производительности кластера
Dose Ambari Web UI будет отслеживать кластеры и предоставлять информацию, предлагающую способы масштабирования?
Рекомендуется ли средство Ambari (или) Вместо использования средства Ambari мне нужно использовать Azure Log Analytics и решения для управления кластером HDInsight.
Запутался, нужно пояснение.
Вы можете использовать бесплатную функцию автоматического масштабирования Azure HDInsight, которая может автоматически увеличивать или уменьшать количество рабочих узлов в вашем кластере на основе ранее установленных критериев. Вы устанавливаете минимальное и максимальное количество узлов во время создания кластера, устанавливаете критерии масштабирования, используя дневное расписание или определенные показатели производительности, а платформа HDInsight делает все остальное.
Как это работает?
Функция автоматического масштабирования использует два типа условий для запуска событий масштабирования: пороговые значения для различных показателей производительности кластера (называемые масштабированием на основе нагрузки) и триггеры на основе времени (называемые масштабированием на основе расписания). Масштабирование на основе нагрузки изменяет количество узлов в вашем кластере в пределах установленного вами диапазона, чтобы обеспечить оптимальное использование ЦП и минимизировать эксплуатационные расходы. Масштабирование на основе расписания изменяет количество узлов в вашем кластере в зависимости от операций, которые вы связываете с определенными датами и временем.
Автоматическое масштабирование — в зависимости от нагрузки:
Автоматическое масштабирование — по расписанию:
Справка: Автоматическое масштабирование кластеров Azure HDInsight
