Публикации по теме 'google-cloud-storage'


Инициировать передачу данных между AWS S3 и облачным хранилищем Google (в python)
Получайте оперативные данные из удаленной корзины Amazon S3 Алоха! У вас есть среда Google Compute Engine, но появляется новое требование: Файлы отправляются в ведро Amazon S3. Все, что вам нужно сделать, это восстановить эти данные, отправить их в свой проект GCP и обработать дома. Это то, что мы делаем здесь. Архитектура План Настройка S3 Настройка GCP (облачное хранилище + IAM) Лямбда-настройка Настройка S3 Перейдите в консоль ведра:..

Вопросы по теме 'google-cloud-storage'

как можно использовать токен на предъявителя Google для авторизации облачного хранилища Google?
Можно ли использовать токен-носитель из библиотеки JavaScript клиента Google API для авторизовать сегмент облачного хранилища Google без запроса https://www.googleapis.com/auth/devstorage области от пользователя. У корзины есть доступ для...
810 просмотров

Можно ли обслуживать статические файлы в Google Cloud Storage с помощью Google App Engine с одним доменом?
Сначала создайте сайт www.example.com с помощью Google App Engine https://cloud.google.com/products/ . Во-вторых, загрузите статическое изображение example.jpg в Google Cloud Storage https://cloud.google.com/products/cloud-storage , также...
1925 просмотров

Публичный доступ при вставке объекта с помощью Google Cloud Storage JSON API
Я вставляю изображения с помощью JSON API Google Cloud Storage, как показано на образец , который необходимо опубликовать с разрешениями на чтение. HTTP-запрос выглядит так: var request = gapi.client.request({ 'path':...
998 просмотров

как я могу загрузить файл в облачном хранилище Google с помощью BlobstoreService java
За 2 дня поиска в Google мне пришлось загрузить файл в Google Cloud Storage с помощью java. Теперь у меня возникли проблемы с загрузкой того же файла из Google Cloud Storage с помощью java. Я пробовал с BlobstoreService загрузить файл. Может ли...
1301 просмотров

Google Cloud Storage: массовое редактирование списков контроля доступа
Мы находимся в процессе перевода наших серверов в Google Cloud Compute Engine и начинаем рассматривать облачное хранилище как вариант CDN. Я загрузил около 1000 файлов через консоль разработчика, но проблема в том, что для всех разрешений объектов...
2636 просмотров
schedule 12.09.2021

Фотография загружена неправильно GCS App Engine
Я работаю над своим сервлетом upload.java для хранения .jpg в GCS. Я использую клиентскую библиотеку GCS вместо Google Cloud Storage API. Но я не нашел образца для загрузки фотографии (метод doPost), поэтому мой код не работает ... Отправка...
563 просмотров

Решение для создания карты сайта для динамического веб-сайта
КОНТЕКСТ Предположим, мой веб-сайт содержит список магазинов, расположенных в разных странах, штатах, городах и районах. У каждого магазина есть динамически генерируемая веб-страница. Общее количество магазинов в конечном итоге достигнет ~ 1,5...
865 просмотров

Импортировать файлы журналов из Google Cloud Storage в BigQuery
Мы разрабатываем проект, который загружает файлы журналов (пример ниже) из logstach в Google Cloud Storage. Затем позвольте App Engine импортировать данные журнала в BigQuery. Проблема в BigQuery не принимает некоторые имена полей, например...
568 просмотров

Синхронизировать локальную папку на SDCard на устройстве Android с помощью Google Drive программно
Я делаю приложение, которое требует синхронизации моей локальной папки на SDCard с Google Диском. Я не могу найти какой-либо конкретный документ, который мог бы рассказать мне, как я могу синхронизировать локальную папку на моей SDCard на устройстве...
1103 просмотров

Загрузка файла в GCS с помощью Boto в Python
Я пытаюсь загрузить файлы из своей локальной системы в GCS, используя бото в облаке. После загрузки файла я получаю сообщение об ошибке: «MD5, который вы указали в Content-MD5 или x-goog-hash, не соответствует тому, что мы вычислили». Ниже мой код....
524 просмотров

Есть ли способ загрузить содержимое папки из облачного хранилища Google?
Я использую облачное хранилище Google для автоматизации экспорта CSV из большого запроса. То, как я его настроил, в настоящее время создает папку для каждого года> месяц> день> file.csv Итак, допустим, я хотел загрузить отчеты за целый год, могу...
75 просмотров
schedule 27.10.2021

Аутентификация с использованием API облачного хранилища Google .boto
Возникли проблемы с api облачного хранилища Google. выполните настройку отсюда: https://cloud.google.com/storage/docs/gsutil_install Вот мой код, он должен просто распечатать файлы в ведре. Эта структура работала с более ранней версией...
1003 просмотров
schedule 29.10.2021

Spring: как загрузить файловый ресурс из JAR
Я пытаюсь загрузить файл .p12 (сертификат Google) из файловой системы, чтобы аутентифицировать свое приложение для Google Cloud Storage. Credential credential = new GoogleCredential.Builder() .setTransport(httpTransport)...
1603 просмотров
schedule 17.11.2021

Как получить и настроить объекты в Google Datastore через Google Cloud Endpoint API (Android)
Я новичок в этом, поэтому надеюсь, что мой вопрос имеет смысл .. В основном я хочу иметь возможность получать данные GET и POST на сервер Google App Engine, на котором я работаю. Затем я хочу иметь возможность получать те же данные с других...
56 просмотров

Установите метаданные в Google Cloud Storage с помощью gcloud-python
Я пытаюсь загрузить файл в Google Cloud Storage с помощью gcloud-python и установить некоторые настраиваемые свойства метаданных. Чтобы попробовать это, я создал простой скрипт. import os from gcloud import storage client =...
4753 просмотров

Запись вывода конвейера потока данных в секционированное место назначения
У нас есть единый источник потоковых событий с тысячами событий в секунду, все эти события отмечены идентификатором, определяющим, к какому из наших десятков тысяч клиентов принадлежит событие. Мы хотели бы использовать этот источник событий для...
1191 просмотров

Доступ к ведру облачного хранилища Google из другого проекта с помощью Python
Давайте предположим, что у меня есть ведро облачного хранилища Google в проекте X и я хочу загрузить объект в корзину, которая находится в проекте X, из кода (Python), который развернут в проекте Y. Оба проекта X и Y находятся под одними и теми же...
4162 просмотров

Как получить URL-адрес файла Google Cloud Storage с помощью gcloud-node?
Как получить URL-адрес файла в сегменте Cloud Storage с помощью библиотеки узлов gcloud ? Рассмотрим следующее создание файлового объекта: let bucket = gcs.bucket(`aBucket`) let cloudFile = bucket.file(`aFile`) Я хочу получить URL-адрес...
4983 просмотров

Удалить папку в Google Cloud Storage с помощью nodejs gcloud api
Я использую gcloud nodejs api для доступа к Google Cloud Storage. Я могу сохранять / удалять / существующие файлы по отдельности, но я не нашел способа удалить папку или даже перечислить файлы в папке с помощью gcloud nodejs api . Я видел, как...
5111 просмотров

Google Dataflow не читает более 3 сжатых входных файлов одновременно при наличии нескольких источников
Справочная информация : в хранилище Google хранятся 30-дневные данные в 30 отдельных сжатых файлах. Мне нужно записать их в таблицу BigQuery в 30 разных разделах одной и той же таблицы. Размер каждого сжатого файла составлял около 750 МБ....
687 просмотров