Google Cloud Composer, не удается установить python-snappy

Я пытаюсь установить python-snappy в Google Cloud Composer через консоль Google Cloud Platform. Я использую среду python3.

Я пытался установить разные python-snappy версии (0.5.3, 0.5.2, 0.5.1, 0.5, 0.4), однако всегда возникала эта ошибка:

Код состояния ошибки HTTP: 400 Сообщение об ошибке HTTP: ПЛОХОЙ ЗАПРОС Дополнительные ошибки: {"ResourceType": "w071b50175ee0733c-tp / asia-northeast1-kumparan-co-e2ca75b3-gae-typer: appengine.apps.services.versions.create", «ResourceErrorCode»: «400», «ResourceErrorMessage»: «Образ Docker gcr.io/w071b50175ee0733c-tp/c949bad3-ca30-4717-a975-8e36bae3929a либо не найден, либо не в формате Docker V2. = "https://cloud.google.com/container-registry/docs/ui" rel = "nofollow noreferrer"> https://cloud.google.com/container-registry/docs/ui "}

Я также попытался перезапустить, как описано здесь: https://groups.google.com/forum/#!topic/cloud-composer-discuss/jpxAGCPFkZo.

Но в моем случае это не решает эту проблему.

Любой орган знает, как это решить?


person Sugimiyanto    schedule 14.01.2019    source источник
comment
Можете ли вы указать точную команду установки, которую вы использовали?   -  person Dustin Ingram    schedule 14.01.2019
comment
как я уже сказал, я использую консоль GCP для установки библиотеки. Итак, это делается просто путем вставки имени библиотеки. Вы можете просмотреть эту ссылку, см. Часть Installing a Python dependency from PyPi на вкладке console. cloud.google.com/composer/docs/how- to / using /   -  person Sugimiyanto    schedule 15.01.2019


Ответы (1)


Если вы перейдете к https://console.cloud.google.com/cloud-build/builds/, вы должны увидеть неудачную сборку со следующими журналами:

Failed building wheel for python-snappy
Running setup.py clean for python-snappy
Failed to build python-snappy
Installing collected packages: python-snappy
Running setup.py install for python-snappy: started
Running setup.py install for python-snappy: finished with status 'error'
Complete output from command /usr/local/bin/python2 -u -c "import setuptools, tokenize;__file__='/tmp/pip-install-M5s4qk/python-snappy/setup.py';f=getattr(tokenize, 'open', open)(__file__);code=f.read().replace('\r\n', '\n');f.close();exec(compile(code, __file__, 'exec'))" install --record /tmp/pip-record-EuqCf8/install-record.txt --single-version-externally-managed --compile:
running install
running build
running build_py
creating build
creating build/lib.linux-x86_64-2.7
creating build/lib.linux-x86_64-2.7/snappy
copying snappy/snappy_cffi_builder.py -> build/lib.linux-x86_64-2.7/snappy
copying snappy/snappy_cffi.py -> build/lib.linux-x86_64-2.7/snappy
copying snappy/__main__.py -> build/lib.linux-x86_64-2.7/snappy
copying snappy/snappy_formats.py -> build/lib.linux-x86_64-2.7/snappy
copying snappy/snappy.py -> build/lib.linux-x86_64-2.7/snappy
copying snappy/hadoop_snappy.py -> build/lib.linux-x86_64-2.7/snappy
copying snappy/__init__.py -> build/lib.linux-x86_64-2.7/snappy
running build_ext
building 'snappy._snappy' extension
creating build/temp.linux-x86_64-2.7
creating build/temp.linux-x86_64-2.7/snappy
gcc -pthread -fno-strict-aliasing -g -O2 -DNDEBUG -g -fwrapv -O3 -Wall -Wstrict-prototypes -fPIC -I/usr/local/include/python2.7 -c snappy/snappymodule.cc -o build/temp.linux-x86_64-2.7/snappy/snappymodule.o
cc1plus: warning: command line option ‘-Wstrict-prototypes’ is valid for C/ObjC but not for C++
snappy/snappymodule.cc:31:22: fatal error: snappy-c.h: No such file or directory
#include <snappy-c.h>
^
compilation terminated.
error: command 'gcc' failed with exit status 1

Это потому, что пакет python-snappy - это только привязки Python к базовой библиотеке C, а не сама библиотека C.

См. «Ошибка при установке python-snappy: snappy- ch: Нет такого файла или каталога » для получения дополнительной информации.

person Dustin Ingram    schedule 15.01.2019
comment
Да, ты прав. проблема здесь в том, что мы не можем установить библиотеку C в Google Cloud Composer, потому что библиотека C является пакетом системного уровня. Google Cloud Composer не поддерживает установку произвольных системных пакетов, как описано здесь: groups.google.com/forum / #! topic / cloud-composer-Discussion / - person Sugimiyanto; 16.01.2019