Правильное кодирование текста в программе массовой загрузки

Как правильно кодировать строки для программы массовой загрузки? В настоящее время он выходит из строя, когда сталкивается с апострофом в моих текстовых полях.

Вот пример файла CSV:

demo,name,message
FALSE,one,"Welcome message"
FALSE,two,"If you’re having a medical emergency"

Вот мой файл bulkloader.yaml:

transformers:
- kind: Message
  connector: csv
  connector_options:
   encoding: utf-8
   columns: from_header
  property_map:
   - property: demo
     external_name: demo
     import_transform: bool
   - property: name
     external_name: name
     import_transform: str
   - property: message
     external_name: message
     import_transform: str

Когда я запускаю загрузчик с таким образцом (с апострофами в тексте), я получаю следующую ошибку ...

UnicodeEncodeError: кодек ascii не может кодировать символ u '\ u2019' в позиции x: порядковый номер не в диапазоне (128)

Любая помощь приветствуется.


person Greg    schedule 05.07.2011    source источник


Ответы (1)


не является символом ASCII. Вам следует попробовать изменить преобразование свойства на import_transform: unicode

person Luke Francl    schedule 05.07.2011