Вопросы по теме 'snowflake-cloud-data-platform'

Как удалить все символы новой строки из всех таблиц / столбцов
Я работаю над экспортом базы данных из SQL Server в Snowflake, и я столкнулся с проблемой, когда у нас есть неизвестное количество столбцов с комментариями пользователей и новыми строчными символами. Проблема в том, что в базе данных более 280...
1367 просмотров

Коннектор Snowflake python не работает с большим набором данных в AWS Lambda
Я использую коннектор Python Snowflakes, чтобы попытаться получить набор данных из нашего хранилища данных для обработки. Это задание выполняется в лямбда-функции AWS, и возникают проблемы, когда количество возвращаемых строк составляет ~ 20 или...
2102 просмотров

Python Pandas: объединить столбцы фрейма данных с именем столбца в один столбец
В моем фрейме данных есть данные в следующем формате: >>> df = pd.DataFrame(np.random.randn(6,4),index=dates,columns=list('ABCD')) >>> df A B C D 0 0.578095 -1.985742 -0.269517 -0.180319 1...
1096 просмотров

Как мне перечислить все роли пользователя в Snowflake DB?
Можно ли перечислить все роли, к которым у пользователя есть доступ в Snowflake DB? Кажется, я могу показать пользователям, у кого есть доступ к роли, но я не могу понять, как перечислить роли, которые предоставлены пользователю. Конечно, я могу...
3048 просмотров

SnowflakeSQLException Код ошибки: 390100, сообщение: указано неверное имя пользователя или пароль
Подключено к Snowflake с помощью драйвера Python JDBC, но не может сделать это с помощью pyspark в ноутбуке jupyter? Уже подтверждена правильность моего имени пользователя и пароля. Детали окружающей среды: - окна 10 python 3.6.6 (блокнот...
1641 просмотров

Как сгладить набор ARRAY_AGGS в Snowflake SELECT
Я пытаюсь сделать SELECT для нескольких объединенных таблиц с колонками VARIANT. Основная запись возвращается как DATA, а вся вспомогательная информация вокруг нее состоит из поддерживающих соединенных таблиц, возвращаемых как INCLUDED. Я...
1041 просмотров

Snowflake SQL: получайте записи за последний день месяца
Там, где обычно используется EOMonth, в Snowflake такой функции нет. У них есть LAST_DAY, но пока мне не удалось заставить его работать. Кто-нибудь видит, что я сделал неправильно, ниже ИЛИ есть способ обхода EOMonth в Snowflake? Мои попытки:...
1072 просмотров

Ожидается VARIANT, но есть VARCHAR для столбца
Я пытаюсь вставить строку JSON в таблицу снежинок, определенную ниже: from snowflake.sqlalchemy import VARIANT class Identify(Base): __tablename__ = 'identify' event_id = Column(Integer, Sequence('event_id_seq'), unique=True,...
1215 просмотров

Snowflake SDKTest: ошибка: (137, 49) java: не удается найти символьную переменную Местоположение PublicKeyReader: класс net.snowflake.ingest.example.SDKTest
Я не могу запустить класс SDKTest, следуя этой документации: https://docs.snowflake.net/manuals/user-guide/data-load-snowpipe-rest-load.html Я использую IntelliJ и Java SDK 12.0. Error:(137, 49) java: cannot find symbol symbol:...
361 просмотров

Можно ли установить переменную внутри хранимой процедуры, чтобы представление ее использовало?
У меня есть представление, которое зависит от переменной сеанса: create or replace view test as ( select getvariable('MY_VAR')::int as col1 ) ; Я могу запросить это представление следующим образом: set MY_VAR=5; select * from test;...
1334 просмотров
schedule 16.09.2021

Снежинка - можно ли по умолчанию просматривать историю запросов всего за 7 дней?
Я пытался увидеть запросы за последний месяц, но, судя по этому обсуждению, похоже, что прошло всего 7 дней ......
1260 просмотров

Передайте значение в процедуре javascript снежинки
Возможно ли в Snowflake dwh получить результат SQL-запроса и передать его в качестве переменной следующему запросу в рамках той же процедуры? Я пытаюсь попробовать% ROWCOUNT, CURSOR case, но застрял в следующем: CREATE OR REPLACE PROCEDURE...
1102 просмотров

Можно ли сгенерировать динамический sql для возврата строк с различными столбцами в снежинке
Мы храним различные данные как значения / пары в столбце JSON. Имена пар не одинаковы для всех строк и зависят от некоторых метаданных. Есть ли способ написать оператор SQL, который извлекает некоторые из этих пар значений в зависимости от...
1090 просмотров
schedule 18.10.2021

запросы, выполняемые в рамках транзакции
Мы используем коннектор снежинки python для выполнения запросов. Недавно мы внесли изменения в код, чтобы инкапсулировать несколько запросов для выполнения в рамках одной транзакции. В рамках тестирования мы хотим убедиться, что все эти запросы...
225 просмотров
schedule 15.11.2021

Как поделиться схемой SNOWFLAKE.ACCOUNT_USAGE, используя управляемую учетную запись / учетную запись читателя?
Я пытаюсь поделиться своей базой данных Snowflake (метаданные по умолчанию) -> Схема Account_Usage -> Таблица Query_History другой управляемой учетной записи (т. Е. Учетной записи читателя), но данные не отображаются в другой учетной записи. есть ли...
267 просмотров

Изменить неподдерживаемую функцию по умолчанию для набора столбцов
Я хочу изменить таблицу и установить последовательность по умолчанию для столбца, который является идентификатором. Когда я пытаюсь бежать ALTER TABLE report.test_table MODIFY id set default test_table_seq.NEXTVAL; он показывает следующую...
896 просмотров

КОПИРОВАТЬ в таблицу Snowflake без определения схемы таблицы
Есть ли способ скопировать данные из S3 в Snowflake без предварительного определения столбцов вручную? Я не хочу определять схему для таблицы в Snowflake ИЛИ схему, для которой столбцы должны быть импортированы из S3. Я хочу, чтобы это была схема...
859 просмотров

У кого-нибудь есть опыт интеграции мониторинга данных со Snowflake?
Кто-нибудь знает, работает ли агент Datadog на снежинке? Мы хотим использовать Datadog для сбора метрик снежинок, трассировок и журналов, а также для создания информационных панелей, графиков и мониторов.
1050 просмотров

Как отфильтровать таблицы показа
Я хочу отфильтровать вывод show tables . В документации есть один пример того, как это сделать. используя result_scan(last_query_id()) , но для меня пример не работает: show tables; select "schema_name", "name" as "table_name", "rows"...
178 просмотров
schedule 11.10.2021

Вызов функции azure для вызова процедуры в снежинке для загрузки данных вызывает тайм-аут в плане потребления, есть ли другой способ добиться этого?
Я хочу запустить процедуру в хранилище снежинок для загрузки файла из хранилища Azure blob, для этого я реализовал коннектор снежинки как функцию лазурного, и он работает по плану потребления (динамическому). Но план потребления имеет тайм-аут по...
161 просмотров