Публикации по теме 'google-cloud-storage'
Инициировать передачу данных между AWS S3 и облачным хранилищем Google (в python)
Получайте оперативные данные из удаленной корзины Amazon S3
Алоха!
У вас есть среда Google Compute Engine, но появляется новое требование:
Файлы отправляются в ведро Amazon S3.
Все, что вам нужно сделать, это восстановить эти данные, отправить их в свой проект GCP и обработать дома.
Это то, что мы делаем здесь.
Архитектура
План
Настройка S3 Настройка GCP (облачное хранилище + IAM) Лямбда-настройка
Настройка S3
Перейдите в консоль ведра:..
Вопросы по теме 'google-cloud-storage'
как можно использовать токен на предъявителя Google для авторизации облачного хранилища Google?
Можно ли использовать токен-носитель из библиотеки JavaScript клиента Google API для авторизовать сегмент облачного хранилища Google без запроса https://www.googleapis.com/auth/devstorage области от пользователя. У корзины есть доступ для...
810 просмотров
schedule
27.11.2021
Можно ли обслуживать статические файлы в Google Cloud Storage с помощью Google App Engine с одним доменом?
Сначала создайте сайт www.example.com с помощью Google App Engine https://cloud.google.com/products/ .
Во-вторых, загрузите статическое изображение example.jpg в Google Cloud Storage https://cloud.google.com/products/cloud-storage , также...
1925 просмотров
schedule
20.11.2021
Публичный доступ при вставке объекта с помощью Google Cloud Storage JSON API
Я вставляю изображения с помощью JSON API Google Cloud Storage, как показано на образец , который необходимо опубликовать с разрешениями на чтение. HTTP-запрос выглядит так:
var request = gapi.client.request({
'path':...
998 просмотров
schedule
29.11.2021
как я могу загрузить файл в облачном хранилище Google с помощью BlobstoreService java
За 2 дня поиска в Google мне пришлось загрузить файл в Google Cloud Storage с помощью java. Теперь у меня возникли проблемы с загрузкой того же файла из Google Cloud Storage с помощью java.
Я пробовал с BlobstoreService загрузить файл. Может ли...
1301 просмотров
schedule
23.10.2021
Google Cloud Storage: массовое редактирование списков контроля доступа
Мы находимся в процессе перевода наших серверов в Google Cloud Compute Engine и начинаем рассматривать облачное хранилище как вариант CDN. Я загрузил около 1000 файлов через консоль разработчика, но проблема в том, что для всех разрешений объектов...
2636 просмотров
schedule
12.09.2021
Фотография загружена неправильно GCS App Engine
Я работаю над своим сервлетом upload.java для хранения .jpg в GCS.
Я использую клиентскую библиотеку GCS вместо Google Cloud Storage API. Но я не нашел образца для загрузки фотографии (метод doPost), поэтому мой код не работает ...
Отправка...
563 просмотров
schedule
18.10.2021
Решение для создания карты сайта для динамического веб-сайта
КОНТЕКСТ Предположим, мой веб-сайт содержит список магазинов, расположенных в разных странах, штатах, городах и районах. У каждого магазина есть динамически генерируемая веб-страница. Общее количество магазинов в конечном итоге достигнет ~ 1,5...
865 просмотров
schedule
14.10.2021
Импортировать файлы журналов из Google Cloud Storage в BigQuery
Мы разрабатываем проект, который загружает файлы журналов (пример ниже) из logstach в Google Cloud Storage. Затем позвольте App Engine импортировать данные журнала в BigQuery. Проблема в
BigQuery не принимает некоторые имена полей, например...
568 просмотров
schedule
24.10.2021
Синхронизировать локальную папку на SDCard на устройстве Android с помощью Google Drive программно
Я делаю приложение, которое требует синхронизации моей локальной папки на SDCard с Google Диском. Я не могу найти какой-либо конкретный документ, который мог бы рассказать мне, как я могу синхронизировать локальную папку на моей SDCard на устройстве...
1103 просмотров
schedule
18.09.2021
Загрузка файла в GCS с помощью Boto в Python
Я пытаюсь загрузить файлы из своей локальной системы в GCS, используя бото в облаке. После загрузки файла я получаю сообщение об ошибке: «MD5, который вы указали в Content-MD5 или x-goog-hash, не соответствует тому, что мы вычислили». Ниже мой код....
524 просмотров
schedule
07.10.2021
Есть ли способ загрузить содержимое папки из облачного хранилища Google?
Я использую облачное хранилище Google для автоматизации экспорта CSV из большого запроса. То, как я его настроил, в настоящее время создает папку для каждого года> месяц> день> file.csv
Итак, допустим, я хотел загрузить отчеты за целый год, могу...
75 просмотров
schedule
27.10.2021
Аутентификация с использованием API облачного хранилища Google .boto
Возникли проблемы с api облачного хранилища Google. выполните настройку отсюда: https://cloud.google.com/storage/docs/gsutil_install
Вот мой код, он должен просто распечатать файлы в ведре. Эта структура работала с более ранней версией...
1003 просмотров
schedule
29.10.2021
Spring: как загрузить файловый ресурс из JAR
Я пытаюсь загрузить файл .p12 (сертификат Google) из файловой системы, чтобы аутентифицировать свое приложение для Google Cloud Storage.
Credential credential = new GoogleCredential.Builder()
.setTransport(httpTransport)...
1603 просмотров
schedule
17.11.2021
Как получить и настроить объекты в Google Datastore через Google Cloud Endpoint API (Android)
Я новичок в этом, поэтому надеюсь, что мой вопрос имеет смысл ..
В основном я хочу иметь возможность получать данные GET и POST на сервер Google App Engine, на котором я работаю. Затем я хочу иметь возможность получать те же данные с других...
56 просмотров
schedule
11.10.2021
Установите метаданные в Google Cloud Storage с помощью gcloud-python
Я пытаюсь загрузить файл в Google Cloud Storage с помощью gcloud-python и установить некоторые настраиваемые свойства метаданных. Чтобы попробовать это, я создал простой скрипт.
import os
from gcloud import storage
client =...
4753 просмотров
schedule
24.09.2021
Запись вывода конвейера потока данных в секционированное место назначения
У нас есть единый источник потоковых событий с тысячами событий в секунду, все эти события отмечены идентификатором, определяющим, к какому из наших десятков тысяч клиентов принадлежит событие. Мы хотели бы использовать этот источник событий для...
1191 просмотров
schedule
22.09.2021
Доступ к ведру облачного хранилища Google из другого проекта с помощью Python
Давайте предположим, что у меня есть ведро облачного хранилища Google в проекте X и я хочу загрузить объект в корзину, которая находится в проекте X, из кода (Python), который развернут в проекте Y. Оба проекта X и Y находятся под одними и теми же...
4162 просмотров
schedule
12.11.2021
Как получить URL-адрес файла Google Cloud Storage с помощью gcloud-node?
Как получить URL-адрес файла в сегменте Cloud Storage с помощью библиотеки узлов gcloud ?
Рассмотрим следующее создание файлового объекта:
let bucket = gcs.bucket(`aBucket`)
let cloudFile = bucket.file(`aFile`)
Я хочу получить URL-адрес...
4983 просмотров
schedule
18.11.2021
Удалить папку в Google Cloud Storage с помощью nodejs gcloud api
Я использую gcloud nodejs api для доступа к Google Cloud Storage. Я могу сохранять / удалять / существующие файлы по отдельности, но я не нашел способа удалить папку или даже перечислить файлы в папке с помощью gcloud nodejs api .
Я видел, как...
5111 просмотров
schedule
25.10.2021
Google Dataflow не читает более 3 сжатых входных файлов одновременно при наличии нескольких источников
Справочная информация : в хранилище Google хранятся 30-дневные данные в 30 отдельных сжатых файлах. Мне нужно записать их в таблицу BigQuery в 30 разных разделах одной и той же таблицы. Размер каждого сжатого файла составлял около 750 МБ....
687 просмотров
schedule
25.11.2021