Вставка / запрос к локальным таблицам U-SQL выполняется довольно быстро по сравнению с тем, когда мы создаем и используем таблицы из ADLA. Мы смогли вставить данные из CSV в три таблицы локально примерно за 8 минут без использования какого-либо параллелизма, и та же работа заняла около 10 минут в ADLA с параллелизмом 10 (без настройки параллелизма задание занимало гораздо больше времени). Можем ли мы добиться такой же производительности?
Разница в производительности локальных таблиц U-SQL и ADLA?
Ответы (1)
Каковы определения таблиц и размеры данных? В частности, как вы указали кластеризацию и распределение разделов высокого уровня?
Кроме того, время компиляции локального задания может быть намного короче, чем в кластере, поскольку ему не нужно создавать план горизонтального масштабирования.
person
Michael Rys
schedule
16.06.2016
