Как настроить потоки данных сопоставления Azure с переменным количеством столбцов в файле CSV?

Я создаю поток данных сопоставления, используя CSV, в котором количество полей в строке не фиксировано. По значению в конкретном поле я могу сказать, сколько полей будет в строке.

У меня есть пример файла, в котором в первой строке 19 полей. Некоторые строки, которые я хочу обработать, имеют 22 поля. Если в редакторе потока данных я щелкну «Источник» и перейду на вкладку «Проверка», отобразятся 19 столбцов. Я предполагаю, что он читает это с первого ряда. Я отредактировал сценарий для потока данных, так что для источника определены 22 поля, и теперь я вижу это на вкладке «Проверка». Однако, если я щелкну вкладку «Просмотр данных», все значения столбцов с 20 по 22 будут ПУСТО (NULL), даже для строк, содержащих 22 поля с допустимыми значениями.

Как я могу заставить поток данных пытаться прочитать все доступные поля из каждой строки?


person jbailey.tc    schedule 18.02.2021    source источник