Экспорт Google Cloud Logging в Big Query не работает

Я использую веб-интерфейс облачных журналов Google для экспорта журналов вычислений Google в большой набор данных запросов. Согласно документации, вы даже можете создать большой набор данных запроса из этого веб-интерфейса (он просто просит дать набору данных имя). Он также автоматически устанавливает правильные разрешения для набора данных.

Кажется, что конфигурация экспорта сохраняется без ошибок, но прошло несколько часов, и я не вижу никаких таблиц, созданных для набора данных. Согласно документам, экспорт журналов приведет к потоковой передаче журналов в большой запрос и создаст таблицу со следующим шаблоном:

my_bq_dataset.compute_googleapis_com_activity_log_ГГГГММДД

https://cloud.google.com/logging/docs/export/using_exported_logs#log_entries_in_google_bigquery

Я не могу думать ни о чем другом, что могло бы быть неправильным. Я являюсь владельцем проекта, и набор данных создан в правильном проекте (у меня только один проект).

Я также попытался экспортировать журналы в ведро хранилища Google, и все равно не повезло. Я правильно установил разрешения, используя gsutil, в соответствии с этим:

https://cloud.google.com/logging/docs/export/configure_export#setting_product_name_short_permissions_for_writing_exported_logs

И, наконец, я убедился, что «источник», который я пытаюсь экспортировать, действительно имеет некоторые записи журнала.

Спасибо за помощь!


person Prathap Sridharan    schedule 03.12.2015    source источник


Ответы (2)


Были ли вы загружены какие-либо записи журнала с момента настройки экспорта? Cloud Logging экспортирует в BigQuery или Cloud Storage только те записи, которые поступают после настройки конфигурации экспорта. См. https://cloud.google.com/logging/docs/export/using_exported_logs#exported_logs_availability.

person Marc Unangst    schedule 20.03.2016

Возможно, вы не дали разрешения на редактирование для «[email protected]» в консоли Big Query. См. здесь.

person Rajat    schedule 05.04.2016
comment
Привет. Было бы лучше, если бы вы могли разместить информацию на сайте, чтобы пользователи могли ее прочитать. Если эта ссылка изменится, ваш ответ станет совершенно бесполезным. Ваше здоровье. - person Cthulhu; 05.04.2016