Вопросы по теме 'reducers'

Выполняются ли Hadoop Mappers только локально?
У меня есть ситуация, когда целые блоки файла лежат на одном компьютере, а коэффициент репликации по умолчанию равен 1. В этом сценарии, если я запускаю hadoop в своем кластере, я чувствую, что все мои задачи сопоставления будут выполняться только...
331 просмотров
schedule 10.10.2021

Какой эффективный способ подсчета строк в Pig?
Каков эффективный способ подсчета в Pig? Мы можем выполнить GROUP ALL, но для этого дан только 1 редуктор. Когда размер данных очень велик, скажем, n терабайт, можем ли мы как-нибудь попробовать несколько редукторов? dataCount = FOREACH (GROUP...
10376 просмотров
schedule 25.09.2021

Как работать с Mapreduce путем определения ключей в Python Hadoop
У меня есть два ключевых значения из функции карты: NY и Others. Итак, вывод моего ключа: NY 1 или Other 1. Только эти два случая. моя функция карты: #!/usr/bin/env python import sys import csv import string reader =...
865 просмотров
schedule 30.09.2021

Как предотвратить сброс локального состояния при отправке действия редуктору?
Я создаю простую базу данных и использую форму критериев поиска. Я хочу отправить действие в Reducer только после отправки формы . const mapDispatchToProps = dispatch => { return { onSubmittedForm: (criteria) =>...
1100 просмотров
schedule 17.11.2021

TypeError: невозможно прочитать карту свойств undefined React Native Redux
Я попытался создать редуктор, следуя той же логике примера, который я работал с репозиториями git. Вот сказал редуктор: /** * Created by kenji on 3/9/18. */ /** * /stock?search=String * Searches Stock table, checking for given search value...
918 просмотров
schedule 19.10.2021

Невозможно добавить существующий продукт в корзину в редукторе в редукторе с реагированием на родной
Я работаю над собственным приложением реакции, у которого есть материнский магазин, я использую redux для работы с глобальным состоянием, и в моих редукторах мне нужно обрабатывать добавление в корзину, если продукт не существует в корзине или если...
116 просмотров
schedule 09.09.2021

Разрушение состояния по умолчанию в redux reducer
В чем разница в возврате состояния в случае по умолчанию в редукторе redux между return state и return { ...state } ?
68 просмотров

Решают ли редукторы (в Clojure) проблему накопления папок с масштабированием, описанную Гаем Стилом?
В своем выступлении Будущее Clojure Бодил делает следующее заявление: Гай Стил выступил на ICFP с докладом под названием Организация функционального кода для параллельного выполнения (или foldl и foldr считаются слегка вредными) (Также...
312 просмотров

Могут ли редукторы и мапперы находиться на одном и том же узле данных?
Я начал читать о больших данных и Hadoop, поэтому этот вопрос может показаться вам очень глупым. Это то, что я знаю. Каждый преобразователь обрабатывает небольшой объем данных и выдает промежуточный результат. После этого у нас есть этап...
2174 просмотров
schedule 16.03.2022

Модуль не найден: не удается разрешить './reducers/index'
Модуль не найден: не удается разрешить './reducers/index' в'C: \ Users \ Dibba \ Desktop \ rdx \ src '. Эта ошибка произошла во время сборки и не может быть отклонена. версия узла - v9.11.2 версия npm - 6.9.1-next.0 состав: сообщение...
2513 просмотров
schedule 13.03.2022

Плоский список с разбивкой на страницы результатов Причина повторной визуализации при добавлении дополнительных данных с помощью Redux
Я пытаюсь отобразить список информации с сервера (результаты с разбивкой на страницы) при реагировании на родной с помощью плоского списка Проблема заключается в том, что при загрузке второй партии результатов всегда выполняется повторная...
405 просмотров

Редуктор возвращает состояние дважды, как обновить в магазине?
Мой редуктор возвращает состояние асинхронным способом, поскольку он будет взаимодействовать с другим компонентом, как сделать повторный рендеринг компонента после состояния обновления редуктора в .then? switch (action.type) { case...
91 просмотров
schedule 14.04.2022

Сумма данных сбора изображений за отдельные годы в пределах вновь определенных ячеек сетки в GEE
Я работаю в Google Earth Engine Javascript API и определил ячейки сетки, охватывающие интересующую меня область. Это: var lat_start = 32.31644; var lat_end = 37.31914; var lon_start = 35.61394; var lon_end = 42.38504; // 2) Decide no. of (in...
204 просмотров
schedule 25.05.2022

Разделить ввод на редуктор в hadoop
Этот вопрос отчасти связан с моим другим вопросом Hadoop обрабатывает перекос данных в редукторе . Тем не менее, я хотел бы спросить, есть ли какие-либо доступные настройки конфигурации, чтобы, скажем, максимальная память редуктора была...
239 просмотров

Словарь Python с ключом двойных значений, нужно найти максимальное и минимальное значение
У меня есть словарь с несколькими уникальными ключами и значениями формата {'movieID': [val1, val2]}. Я хочу распечатать идентификатор фильма с максимальным значением1 и минимальным значением2. Val1 — это рейтинг, данный женщиной, а Val2 — это...
87 просмотров
schedule 15.06.2022

Задания Hadoop с использованием того же вывода редуктора в тот же файл
Я столкнулся с интересной ситуацией, и теперь ищу, как это сделать намеренно. На моей локальной установке с одним узлом я одновременно запускал 2 задания с экрана терминала. Мои оба задания используют один и тот же редуктор, у них есть разница...
2328 просмотров
schedule 02.08.2022

Избегайте дублирования вложенных объектов в хранилище избыточности
Я пробую redux-orm , и из того, что я могу собрать, redux-orm создает объект в магазине, ключом которого является значение, указанное через Model.name , для каждой зарегистрированной модели. Что ж, чтобы создать свой редуктор сущностей, я...
451 просмотров
schedule 23.08.2022

Фильтровать данные в редюсере или в компоненте? как лучше?
У меня есть это приложение, в котором на домашней странице я загружаю компонент, который отображает список фильмов, поступающих из локального файла JSON, который я загружаю в хранилище в App.js в жизненном цикле componentDidMount . И у меня есть...
789 просмотров
schedule 07.09.2022

Как вызвать правильную «коллекцию» магазина с помощью ngrx-store?
У меня есть две коллекции данных (пример приложения - попытка изучить ngrx) счетчика и URL-адресов. Я могу правильно вытащить и отобразить каждый из двух магазинов в соответствующих компонентах. Используя пример счетчика из ngrx-store, я также могу...
733 просмотров
schedule 25.09.2022

Попадают ли значения в редуктор Cloudant в ключевом порядке?
Я пишу код map/reduce для базы данных на Cloudant . Поступают ли значения в функцию reduce(keys, values, rereduce) в ключевом порядке, когда rereduce=false ? Я предполагаю, что они будут, потому что я привык к тому, что вещи работают в Hadoop,...
52 просмотров
schedule 01.10.2022