Вопросы по теме 'amazon-redshift'
Как добавить ключ сортировки к существующей таблице в AWS Redshift
В AWS Redshift я хочу добавить ключ сортировки к уже созданной таблице. Есть ли какая-нибудь команда, которая может добавить столбец и использовать его в качестве ключа сортировки?
34479 просмотров
schedule
15.09.2021
Как просмотреть гранты на Redshift
Хочу посмотреть гранты на красные смещения.
Я нашел это представление для postgres :
CREATE OR REPLACE VIEW view_all_grants AS
SELECT
use.usename as subject,
nsp.nspname as namespace,
c.relname as item,
c.relkind as type,...
62427 просмотров
schedule
03.10.2021
Как сохранить последний обработанный файл S3 в базе данных Redshift
На данный момент я скопировал данные из Amazon S3 в Amazon Redshift с помощью AWS Data Pipeline только на текущую дату и время. Я хочу копировать данные из S3 в Redshift каждые 30 минут. А также последнее обработанное имя файла S3 сохраняется в...
657 просмотров
schedule
07.11.2021
запрос убивается в красном смещении
Я выполняю один оператор выбора в Redshift, моя таблица содержит около 56 миллионов записей. Проблема после выполнения в течение минуты запроса прекращается системой. В командной строке сообщение отображается как Killed , а в консоли AWS статус -...
1493 просмотров
schedule
04.11.2021
Построитель SQL на основе узлов с поддержкой Common Table Expression (WITH clause)
Я создаю приложение Node.js, которому необходимо запрашивать базу данных Redshift (на основе postgres 8.0.2) с использованием CTE. К сожалению, построители SQL-запросов, на которые я смотрел до сих пор ( node-sql , knex.js и sequelize), похоже, не...
2464 просмотров
schedule
22.10.2021
Столбец / Сумма (столбец) в amazon redshift
У меня есть такие данные:
ID Var1 Var2 cvRate(Var1/Var2)
1 1250 85 14.70
2 15 1 15
3 496 12 41.33
4 8825 29 420.23
5 97 18 5.388
Я хотел бы добавить столбец, который по сути...
2878 просмотров
schedule
19.09.2021
Как в Redshift объединить CTAS с предложением if not exists?
У меня проблемы с работой этого запроса на создание таблицы, и мне интересно, не нахожусь ли я в ограничении красного смещения.
Вот что я хочу сделать: у меня есть данные, которые мне нужно перемещать между схемами, и мне нужно создавать целевые...
3238 просмотров
schedule
01.10.2021
Как подсчитать строки и избежать дублирования?
Для университетского проекта мне нужно рассчитать kpi на основе данных одной таблицы. В таблице хранятся данные о корзинах супермаркета и позициях, в которых были сделаны покупки, и их товарной категории. Мне нужно подсчитать количество всех...
108 просмотров
schedule
30.09.2021
Попытка загрузить образцы Redshift, доступ запрещен при копировании с S3
Я просматриваю учебные материалы по Redshift на сайте AWS и не могу получить доступ к их сегментам с образцами данных с помощью команды COPY. Я знаю, что использую правильный ключ и секретный ключ, и даже создал новые, чтобы попробовать, но...
298 просмотров
schedule
10.10.2021
Схема звезды: как работать с таблицей измерений с постоянно меняющимся набором столбцов?
Первый проект с использованием звездообразной схемы, все еще находится на стадии планирования. Мы будем признательны за любые мысли и советы по следующей проблеме.
У нас есть таблица измерений для «используемых функций продукта», и набор функций...
1491 просмотров
schedule
06.10.2021
Как преобразовать типы карт / списков DynamoDB из AWS Pipeline в Redshift?
У меня есть две таблицы DynamoDB, одна с типом данных карты (JSON) и одна с типом данных списка (список JSON).
В нашем текущем конвейере к Redshift утверждается, что это неподдерживаемые типы данных.
Как я могу преобразовать эти столбцы в...
1208 просмотров
schedule
03.12.2021
Как в Amazon Redshift можно массово вставлять строки, только если они еще не существуют?
В Redshift я выполняю массовую вставку значений в таблицу. Однако я хочу вставить в этот список только те значения, которых еще нет в таблице, чтобы избежать дублирования.
INSERT INTO $TEST_TABLE values
(A, 1),
(B, 2),
(C, 3)
Если таблица уже...
5806 просмотров
schedule
18.10.2021
Redshift DEFAULT GETDATE () работает с INSERT, но не COPY
У меня есть столбец с ограничением по умолчанию в моей таблице Redshift, поэтому для него будет заполнена текущая временная метка.
CREATE TABLE test_table(
...
etl_date_time timestamp DEFAULT GETDATE(),
...
);
Это работает должным...
3345 просмотров
schedule
06.11.2021
Восстановить снимок Redshift на другом VPC
Redshift вопрос для новичков.
Из Управление кластерами в виртуальном частном облаке Amazon (VPC) :
Вы можете восстановить его [снимок] в том же VPC или другом VPC в своей учетной записи.
Когда я перехожу к восстановлению моментального...
51 просмотров
schedule
25.11.2021
Скрипт выгрузки Redshift
У меня есть сценарий, в котором есть несколько операторов выгрузки красного смещения
UNLOAD('SELECT * FROM test.products WHERE product_name LIKE \'%20160912%\'')
TO 's3://test-bucket/products/20160912/prod_'
CREDENTIALS 'XXXX'
DELIMITER AS '|'...
2854 просмотров
schedule
03.10.2021
Запрос базы данных Amazon Redshift через PHP
Можно ли запросить Amazon Redshift базу данных через PHP с помощью AWS SDK for PHP , и если да, то какие классы я бы включил и какие функции я бы вызвал? Мне не удается найти соответствующую документацию на их сайте. Я вижу документацию (...
1711 просмотров
schedule
27.11.2021
AWS DMS добавляет новый столбец для отслеживания изменений
Мы используем DMS для переноса данных из MySQL в Redshift (в качестве текущей миграции).
У нас есть несколько больших таблиц в MySQL - слишком больших, чтобы добавлять в них новые столбцы. Однако у нас нет надежных столбцов в существующей таблице,...
1017 просмотров
schedule
25.10.2021
Ошибки синтаксического анализа Json при использовании функции json_extract_path_text () в предложении where
У меня есть таблица Redshift, содержащая столбцы с объектами json. Я столкнулся с ошибками парсера json при попытке выполнить запросы в этой таблице, которая применяет определенные фильтры к содержимому объекта json. Хотя я могу использовать...
3750 просмотров
schedule
05.11.2021
Сводная таблица с Redshift (PostgreSQL) с подсчетом
У меня возникла проблема с Redshift: я пытаюсь динамически перемещать строки в столбцы и агрегировать по счетчику, однако я заметил, что функция сводной таблицы доступна только в PostgreSQL 9.
Есть идеи, как сделать следующее?
index fruit...
218 просмотров
schedule
29.09.2021
Подключение к корзине S3 из кластера Redshift в подсети
Если кластер Redshift находится в общедоступной подсети с интернет-шлюзом, нужна ли мне конечная точка S3 VPC, шлюз NAT или экземпляр NAT, чтобы иметь возможность ВЫГРУЗИТЬ данные из кластера Redshift в корзину S3? Буду признателен, если вы вкратце...
494 просмотров
schedule
14.11.2021
