Вопросы по теме 'gsutil'

Нужна помощь в загрузке корзины из Google Cloud
Мой компьютер сломался, и мне нужно скачать все, что я храню в Google Cloud. Я не компьютерный техник и не могу найти способ загружать целые ведра из Google Cloud. Я пытался следовать инструкциям, приведенным в справочной документации Google. Я...
729 просмотров
schedule 19.09.2021

Использование автономного gsutil из GKE
Я пытаюсь использовать автономный инструмент gsutil из контейнера, работающего в кластере GKE, но не могу заставить его работать. Я считаю, что у кластера есть соответствующие разрешения (см. Ниже). Однако бег ./gsutil ls gs://my-bucket/...
1981 просмотров

gsutil: список только каталогов (ошибка?)
$ gsutil ls -d 'gs://XXX/test/**/' gs://XXX/test/ gs://XXX/test/336x280.swf.gz Таким образом, в нем перечислены не только каталоги (заканчивающиеся на / ), но также и обычные файлы (например, заканчивающиеся на .gz ). Но, соответственно, я...
242 просмотров
schedule 17.09.2021

Как проверить, существует ли какой-либо объект в ведре облачного хранилища Google через bash
Я хотел бы прагматично проверить, существует ли объект в конкретной корзине облачного хранилища Google. В зависимости от наличия объекта я бы выполнял дальнейшие операции. Я прошел через https://cloud.google.com/storage/docs/gsutil/commands/stat...
7437 просмотров
schedule 08.11.2021

Как найти и скопировать с помощью gsutil?
Я знаю, как это сделать, но есть ли простой способ? touch temp/foo for i in $(find my-dir/* -newer temp/foo); do gsutil -m cp -r "$i" gs://my-bucket/ done
86 просмотров
schedule 16.10.2021

Установить разрешения для объекта ведра gs для речевого API
Я хочу преобразовать длинный аудиофайл в текст. Итак, я создал корзину и установил ее как частную, используя gsutil acl set private gs://bucket затем я устанавливаю доступ только для загрузки из определенной учетной записи gsutil acl ch...
458 просмотров

Обеспечение безопасности переменных env GAE с помощью сборщика gsutil для исходного файла app.yaml во время сборки?
У меня та же проблема, что и упомянутая здесь: Безопасное хранение среды переменные в GAE с app.yaml , а именно: «Мне нужно хранить ключи API и другую конфиденциальную информацию в app.yaml в качестве переменных среды для развертывания в GAE....
1362 просмотров
schedule 19.09.2021

Можно ли авторизовать учетную запись службы Google из учетной записи Google, которая уже авторизована для доступа к ведрам GS?
У меня есть учетная запись google (gmail), которой уже разрешен доступ на ЧТЕНИЕ в сегментах хранилища Google. Я пытаюсь получить доступ к этим корзинам программно с помощью gsutil. Я создал учетную запись службы, которая будет иметь идентификатор...
41 просмотров

Как исключить конкретную папку в ведре gcs в облаке Google при копировании на локальный компьютер?
Я пытаюсь скопировать файлы и папки из облачного хранилища Google на виртуальную машину с помощью команды gsutil, но мне нужно исключить несколько папок в ведре gcs при копировании на виртуальную машину, я попытался найти параметры, но не смог их...
92 просмотров

GCS: как сделать резервную копию и сохранить версии с учетной записью службы с минимальными привилегиями
Я хочу настроить учетную запись службы, которая может ежедневно сохранять резервные копии файла в Google Cloud Storage. Я собирался сделать это, используя управление версиями объектов и политику жизненного цикла, которая поддерживает последние 30...
48 просмотров
schedule 05.09.2021

Google Cloud gsutil дает сбой из-за того, что crcmode не скомпилирован
Я запускаю свою сборку с помощью Google Cloudbuild, и у меня есть этап, который копирует кэшированные файлы из корзины хранилища Google. на этом этапе используется образ gsutil от gcr.io/cloud-builders/gsutil. сборка запускается автоматически при...
299 просмотров

Команда gsutil cp копирует весь путь к каталогу (в Windows) - ошибка?
У меня проблема, когда кажется, что gsutil не следует поведению, описанному в документации (по крайней мере, в Windows). В документации указано: При выполнении рекурсивного копирования каталогов имена объектов конструируются, отражая структуру...
12151 просмотров
schedule 06.03.2022

Как заменить все пробелы в именах файлов в GCP Cloud Storage?
У меня есть корзина в облачном хранилище GCP, и я хочу переименовать все файлы, в имени которых есть пробел, в имя, в котором пробел удаляется дефисом (-). Я пробовал что-то вроде gsutil ls...
290 просмотров

gsutil / gcloud список файлов хранилища по ограничениям и разбиению на страницы
Есть ли способ перечислить файлы из корзины GCS с ограничениями. Скажем, у меня в ведре 2k объектов. Но когда я использую gsutil ls, мне нужны только первые 5 объектов, а не все. Как этого добиться. Также есть ли пагинация на страницы? gsutil...
131 просмотров

Таймаут всех моих команд gsutil
поэтому я успешно установил новейшую версию google-cloud-sdk на свой Mac, поэтому все мои инструменты командной строки gcloud и gsutil обновлены. Однако всякий раз, когда я пытаюсь выполнить команду gsutil, время ожидания истекает. Например, когда...
1878 просмотров

Google gsutil auth без запроса
Я хочу использовать gsutil внутри контейнера Docker. Я создал JSON-файл учетной записи службы O2Auth. Как настроить gsutil auth для использования файла конфигурации JSON и выполнения команд без запроса? Сейчас я получаю что-то вроде этого:...
2635 просмотров
schedule 13.03.2022

Загрузите большой файл из Google Cloud Storage с помощью Python
Я пытаюсь загрузить большой файл (2,5 ГБ) из Google Cloud Storage, используя примеры кода, представленные в библиотеке GS Python. Это отлично работает для небольших файлов (я тестировал некоторые файлы размером 1-2 КБ). Я использую Python 2.7.5 в...
1323 просмотров
schedule 19.03.2022

gsutil cp не работает - не удалось создать файл манифеста
У меня проблемы с копиями gsutil (которые я использовал для массовой передачи неструктурированных данных в службу Google Cloud Storage. gsutil -m cp -L samsunghd.log -c -p -R ./*.* gs://samsung2101 Мгновенно выходит из строя и выдает...
593 просмотров

Облачное хранилище Google загружает файл с другим именем файла
Я могу загрузить любой файл с исходным именем файла через скрипт bash. Но когда я меняю имя файла с помощью системы команд gsutil cp, выдает ошибку, что файл не найден. Например, мой сценарий; #!/bin/sh -x #PATH=/root/gsutil...
1164 просмотров
schedule 21.04.2022

Локальная загрузка файлов с помощью GSUtil
Кто-нибудь знает хороший способ загрузить набор файлов локально в эмулированное облачное хранилище Java dev_appserver. Это не сработало: $ gsutil rsync gs://mybucket http://localhost:8888/mybucket InvalidUrlError: Unrecognized scheme "http"....
507 просмотров
schedule 22.04.2022