Вопросы по теме 'polybase'

Polybase SQL Server 2019 в контейнере для SQL Server 2019 OnPremise - не работает вставка во внешнюю таблицу
У меня есть SQL Server 2019 в контейнере Docker с включенным polybase, и я подключаюсь к SQL Server 2019 On Premise с включенным polybase. Я создал внешнюю таблицу в Docker -SQL Server. Я также разрешил экспорт polybase, перезапустил локальный...
317 просмотров
schedule 08.10.2021

Каков наиболее подходящий способ копирования данных с SQL-сервера в аналитику синапсов Azure
После прочтения Интернета у меня есть два варианта для этого Скопируйте данные с помощью ADF с сервера SQL в аналитику синапсов Azure. Скопируйте данные в хранилище BLOB-объектов и оттуда скопируйте данные с помощью внешних таблиц в аналитику...
91 просмотров

PolyBase создает внешнюю таблицу для запроса Hadoop, несоответствие количества столбцов
Мы запустили сервис polybase для запросов к нашему кластеру hadoop. Вот файловая структура на нашей стороне hadoop: Структура для / inventory / tablespace / managed / hive / xxxxxxx / dxxxxxx / created_month = 2019-11 / base_0000083 /...
131 просмотров
schedule 01.11.2021

Ошибка Polybase в Azure Data Lake Gen 2
Я пытаюсь подключиться из Azure SQLDW через Polybase к файлу Parquet в Data Lake Gen 2. Это мой код: CREATE DATABASE SCOPED CREDENTIAL DSC_ServicePrincipal WITH IDENTITY =...
2101 просмотров

Polybase для указания файла (ов) локально в локальной среде?
У меня уникальная ситуация, когда все мои файлы orc находятся в Azure в хранилище BLOB-объектов в виде сжатого файла orc. Мне нужно загрузить эти файлы в локальную базу данных SQL. Я могу использовать polybase для загрузки данных, которые я понимаю,...
333 просмотров
schedule 11.03.2022

Загрузка данных из ADLS Gen 2 в Azure Synapse
Я пытаюсь загрузить файлы Parquet из ADLS Gen2 в Synapse, используя функцию внешней таблицы polybase. Ниже приведен код, но при запуске команды создания внешней таблицы запрос никогда не завершается. При отмене выполнения запроса я вижу эту ошибку...
1399 просмотров

Запрос Polybase из хранилища данных SQL Azure к Azure Data Lake Gen 2 возвращает ноль строк
Почему запрос Polybase из хранилища данных SQL Azure к Azure Data Lake Gen 2 возвращает много строк для одного источника файла, но ноль строк для источника родительской папки? Я создал: Мастер-ключ (СОЗДАТЬ ГЛАВНЫЙ КЛЮЧ;) Учетные данные...
275 просмотров

Когда использовать фабрику данных (копирование) вместо прямого извлечения в синапсе SQL
Я просто просматриваю какой-то документ Microsoft и занимаюсь делами, связанными с инженерией данных. У меня есть несколько запросов для сценария - скопируйте файл (ы) CSV из хранилища BLOB-объектов в аналитику Synapse (этапные таблицы): Я читал,...
106 просмотров

Выталкивание в Polybase
У меня следующий сценарий. Таблица размеров, например. PRODUCT загружается в SQL Server 2016. Таблица фактов, например. ORDER_ITEM загружается в Hadoop. Я хочу выполнить агрегированный запрос по PRODUCT и ORDER_ITEM, например. SELECT...
255 просмотров
schedule 24.01.2023

Создание таблиц Polybase из DataBricks
Будучи новичком в Datawarehouse, у меня есть новое требование создать EXTERNAL TABLE из Datalake (GEN1/GEN2) в DWH из Databricks. Я использовал ссылку , чтобы создать приведенный ниже код. // Set up the Blob storage account access key in the...
670 просмотров

Polybase: Azure Sql DB не может импортировать хранилище BLOB-объектов
Правда ли, что Azure SQL не может импортировать хранилище BLOB-объектов? (SQLDW может быть и отдельным экземпляром) как указано в этом document , это невозможно. Но документ от 2018 года. Что-то изменилось после этого?
79 просмотров

Polybase для подключения локального файла CSV
Я не могу получить доступ к локальному CSV-файлу из SQL Server 2019 Polybase. Это простой текстовый файл с тремя столбцами. Я также создал локальный системный DSN (из пользовательского интерфейса ODBC32). Я получил образец кода из здесь ....
1994 просмотров
schedule 10.04.2023

Прикрепить BaseX к SQL-серверу Функция Polybase
Я создаю приложение на основе SQL-сервера, которое помимо реляционных данных обрабатывает XML-документы. Это работает, но я чувствую, что должен также изучить более специализированные системы хранения XML. Поскольку основным хранилищем...
28 просмотров
schedule 24.11.2022

Загрузка CSV-файла через Polybase без знания последовательности столбцов
Я пытаюсь загрузить несколько файлов CSV из озера данных Azure в Azure Synapse с помощью Polybase. В каждом CSV-файле есть фиксированный набор столбцов, и имена столбцов указаны в первой строке. Однако столбцы могут располагаться в разной...
75 просмотров

выбор данных из внешнего источника (большой двоичный объект хранилища Azure) с помощью внешней таблицы / Polybase в SQL. Таблица создана, но данные не возвращены
У меня есть "|" файл с разделителями в BLOB-объекте хранилища AZURE, и я пытаюсь создать внешнюю таблицу для выбора из этих данных. Я пошагово следовал инструкциям здесь:...
248 просмотров

HdInsight Azure DW Polybase to Hive Table (ORC) с разделом даты не работает
Я пытаюсь создать внешнюю таблицу polybase в хранилище данных Azure для таблицы Hive, которая хранится как ORC (озеро данных HD Insight) и секционируется по дате, когда я запрашиваю внешнюю таблицу ее сбой на сервере SQL без какого-либо надлежащего...
604 просмотров