Вопросы по теме 'udf'
Использование Python UDF в Apache Pig
Я новичок в Apache Pig и Python. Когда я пытаюсь ЗАРЕГИСТРИРОВАТЬ функцию Python в Pig, она выдает ошибку, связанную с Jython. Мой скрипт python udf1.py преобразует любую строку в верхний регистр.
from pig_util import outputSchema...
1265 просмотров
schedule
10.10.2021
Как вызвать пользовательскую функцию SQLite с помощью запроса C # LINQ
С SQLite и C # пробовал ли кто-нибудь вызвать UDF в запросе LINQ?
Поискав в Интернете, я нашел это о создании функции UDF в C #
http://www.ivankristianto.com/howto-make-user-defined-function-in-sqlite-ado-net-with-csharp/
Что касается...
1689 просмотров
schedule
28.11.2021
Свинья udf на фильтр
У меня есть пример использования, в котором мне нужно взять дату месяца, чтобы вернуть последнюю дату предыдущего месяца.
Ex: input:20150331 output:20150228
Я буду использовать последнюю дату этого предыдущего месяца, чтобы отфильтровать...
1155 просмотров
schedule
19.09.2021
Преобразование UDF в массив UDF
Я проверил, как создавать UDF-массивы с одной ячейкой, и не могу понять, что я видел, поэтому я подумал, может быть, мне лучше спросить!
Мне было интересно, может ли кто-нибудь помочь мне выяснить, как преобразовать мой UDF во что-то, что может...
101 просмотров
schedule
05.09.2021
VBA UDF работает при тестировании, но не при использовании в Excel
Я уже отчаялся!
Я построил функцию ниже. Cday относится к ячейке в Excel с датой, например 01/01/2017.
он сопоставляет и находит строку и столбец набора данных и вводит их в массив (dpricebase), который я заранее заполнил данными через...
35 просмотров
schedule
04.10.2021
Apache Spark. Столбец UDF на основе другого столбца без передачи его имени в качестве аргумента.
Есть DataSet с фирмой столбца, я добавляю еще один столбец в этот DataSet - вот пример firm_id:
private val firms: mutable.Map[String, Integer] = ...
private val firmIdFromCode: (String => Integer) = (code: String) => firms(code)
val...
203 просмотров
schedule
06.10.2021
как использовать результат collect_set в улье udf - метод оценки?
Запрос улья -
select ...MYUDF(collect_set(col1))..from tableN
Здесь col1 имеет строковый тип. Я хочу выполнить определенную логику для этого переданного набора данных collect_set. Для пользовательской функции я расширяю класс UDF и...
241 просмотров
schedule
04.10.2021
UDF не рассчитывается в коде VBA
У меня есть UDF, который возвращает текст в зависимости от времени и даты каждой строки.
Эта UDF-формула помещается в X2, и когда я запускаю код обновления данных, который заменяет все данные на листе, я использую filldown для X2:Y и LastRow. Мой...
146 просмотров
schedule
01.04.2022
Spark SQL, вложенный в столбец
У меня есть DataFrame с несколькими столбцами, некоторые из которых являются структурами. Что-то вроде этого
root
|-- foo: struct (nullable = true)
| |-- bar: string (nullable = true)
| |-- baz: string (nullable = true)
|-- abc: array...
10281 просмотров
schedule
25.04.2022
манипуляции со строками для имен столбцов в pyspark
Этот арткл дает отличный обзор того, как изменить названия столбцов. Как изменить имена столбцов фрейма данных в pyspark?
Тем не менее мне нужно что-то большее / немного отрегулированное, на что я не способен. Может ли кто-нибудь помочь удалить...
2167 просмотров
schedule
30.05.2022
Ограничения Varchar для пользовательских функций Redshift Python
Я успешно создал UDF Python, который принимает значение varchar из таблицы и извлекает подстроку этого значения на основе регулярного выражения.
Максимальный размер этого столбца varchar в DDL установлен равным 20000 байт, и в некоторых случаях UDF...
1756 просмотров
schedule
09.06.2022
Возвращаемый массив Hive GenericUDF‹String› Ошибка
Я новичок в GenericUDF. Я пытаюсь создать функцию для создания телефонных номеров с использованием Array<strings> .
Но у меня ОШИБКА:
Вызвано: java.lang.ClassCastException: org.apache.hadoop.hive.serde2.lazy.LazyString нельзя...
1689 просмотров
schedule
18.07.2022
Повторное использование кода Spreadhseet
Кто-нибудь знает способ обернуть рабочий лист как функцию UDF?
По сути, я хотел бы создать рабочий лист или рабочую книгу, которая выполняет определенные вычисления, а затем повторно использовать этот код на другом рабочем листе или рабочих книгах....
49 просмотров
schedule
19.08.2022
имена столбцов искры udf
Мне нужно указать последовательность столбцов. Если я передаю две строки, все работает нормально
val cols = array("predicted1", "predicted2")
но если я передаю последовательность или массив, я получаю сообщение об ошибке:
val cols =...
952 просмотров
schedule
19.09.2022
Создание основной формулы Excel
У нас есть определенные ключевые показатели, которые мы хотели бы рассчитать по более чем 100 формам ввода данных. Расчеты показателей время от времени меняются. Мы хотели бы определить один способ расчета метрики, чтобы все формы ввода данных...
355 просмотров
schedule
28.09.2022
Код R: использование UDF с несколькими аргументами для функции применения
Моя пользовательская функция:
testfn = function(x1, x2, x3){
if(x1 > 0){y = x1 + x2 + x3}
if(x1 < 0){y = x1 - x2 - x3}
return(y)
}
Мой тестовый набор:
test = cbind(rep(1,3),c(2,4,6),c(1,2,3))
Запуск применения:
apply(test,...
1074 просмотров
schedule
15.04.2023
Разделить символы внутри поля Pig
У меня есть текстовый ввод с '|' разделитель как
0.0000|25000| |BM|BM901002500109999998|SZ
который я разделил с помощью PigStorage
A = LOAD '/user/hue/data.txt' using PigStorage('|');
Теперь мне нужно разделить...
86 просмотров
schedule
15.04.2023
Зависимости Java в Pig UDF
Я написал UDF, который использует Joda Time . Я включил его как зависимость в pom.xml. Когда я запускаю скрипт свиньи, я получаю сообщение об ошибке
ERROR 2998: Unhandled internal error....
406 просмотров
schedule
25.11.2022
Пользовательская функция BigQuery, сокращающая все строки
У меня определен следующий UDF (обратите внимание, что в моей таблице есть объект «Id» и «Чтение» с подполем «RawHex»):
// UDF definition
function hexdecode(row, emit) {
emit({
Id: row.Id,
converted: decodeHelper(row.Reading.Raw)
});...
1116 просмотров
schedule
10.07.2023
Google Big Query: оконная функция, совокупная сумма строк по столбцам
Я хочу рассчитать совокупную сумму по столбцам в Google Big Query.
Предположим, что есть пять столбцов (NAME,A,B,C,D) с двумя строками целых чисел, например:
NAME | A | B | C | D
----------------------
Bob | 1 | 2 | 3 | 4
Carl | 5 | 6 | 7...
2056 просмотров
schedule
27.10.2022
