Вопрос: ваш объект Reading случайно не является повторяющимся столбцом?
Если это так, вам нужно сделать что-то вроде этого:
function hexdecode(r, emit) {
for (var i = 0; i < r.reading.length; ++i) {
emit({ tag: r.Id, num: parseInt(r.reading[i].Raw, 16) });
}
}
bigquery.defineFunction(
'hexdecode',
['Id', 'reading.Raw'],
[{name: 'tag', type: 'string'},
{name: 'num', type: 'integer'}],
hexdecode
);
Если вы попытаетесь получить доступ к r.reading.Raw
, это будет попытка доступа к свойству Raw
массива JavaScript. Это совершенно допустимый JavaScript, но это определенно не то, что вам нужно, поскольку значение не определено (null).
Один удобный прием — распечатать строку JSON входной записи, чтобы увидеть, что UDF видит в качестве входных данных:
bigquery.defineFunction(
'jsonifyObj',
['Id', 'reading.Raw'],
[{name: 'obj', type: 'string'}],
function(r, emit) { emit({obj: JSON.stringify(r)}); }
);
Это может помочь отладить проблемы. Я подозреваю, что проблема в этом случае заключается в том, что ваши данные больше похожи на
[{"Id":"ABC","Reading":[{"Raw":"0004"}, {"Raw": "00ff"}]},
{"Id":"CDE","Reading":[{"Raw":"000b"}, {"Raw": "0012"}]}]
-------- Обновление 2015-11-17 --------
В вашем коде есть несколько проблем, прокомментированных ПРИМЕЧАНИЕ ниже:
function hexdecode(row, emit) {
for (var i = 0; i < row.reading.length; ++i) {
// NOTE: tag and row.Id are wrong, this must be TagId and row.TagId based on your input and output specifications
emit({ tag: row.Id,
times: row.reading[i].Timestamp,
// NOTE: You're making a recursive call here! You should be calling decodeHelper() not hexdecode().
convert: hexdecode(row.reading[i].RawCO) });
}
}
// Helper function with error handling
function decodeHelper(s) {
try {
return parseInt(s, 16);
} catch (ex) {
return s;
}
}
// UDF registration
bigquery.defineFunction(
'hexdecode', // Name used to call the function from SQL
['TagId', 'reading.Timestamp', 'reading.RawCO'], // Input column names
// JSON representation of the output schema
[{name: 'TagId', type: 'STRING'},
{name: 'times', type: 'INTEGER'},
{name: 'convert', type: 'INTEGER'}],
hexdecode // The function reference
);
Ваш вложенный выбор возвращает 0 строк, поэтому я обновил следующий SQL:
select
TagID, times, convert
from hexdecode(
select r.TagId, r.Reading.Timestamp, r.Reading.RawCO from [table.Readings] r where r.Reading.RawCO is not NULL and r.Reading.PPM is
not NULL
and r.TagId = 'Tag_00000000'
)
А вот исправленный код:
function hexdecode(row, emit) {
for (var i = 0; i < row.reading.length; ++i) {
emit({TagId: row.TagId, times: row.reading[i].Timestamp, convert: decodeHelper(row.reading[i].RawCO)});
}
}
// Helper function with error handling
function decodeHelper(s) {
try {
return parseInt(s, 16);
} catch (ex) {
return s;
}
}
// UDF registration
bigquery.defineFunction(
'hexdecode', // Name used to call the function from SQL
['TagId', 'reading.Timestamp', 'reading.RawCO'], // Input column names
// JSON representation of the output schema
[{name: 'TagId', type: 'STRING'},
{name: 'times', type: 'INTEGER'},
{name: 'convert', type: 'INTEGER'}],
hexdecode // The function reference
);
person
thomaspark
schedule
11.11.2015