Вопросы по теме 'bulk-load'

Использование SQLXMLBulkLoad, исключение из-за того, что столбец не принимает значения NULL
Я пытаюсь выполнить массовую вставку XML-данных в SQL Server 2005 Express с помощью объектной модели SQLXMLBulkLoad в VB.NET с помощью Visual Studio 2010. Когда загрузчик добирается до элемента в моем XML-файле, который не содержит значения, он...
616 просмотров

MySqlBulkLoader и данные Unicode
В настоящее время я пытаюсь использовать MySqlBulkLoader в приложении .NET для добавления данных в формате Unicode и UTF8. Мой код делает следующее записывает текстовый файл с разделителями табуляции, используя TextWriter и Stream writer...
1268 просмотров
schedule 09.10.2021

Массовая загрузка HBase в несколько таблиц
Мы используем методы массовой загрузки HBase, как описано в: http://blog.cloudera.com/blog/2013/09/how-to-use-hbase-bulk-loading-and-why/ (то есть создание H-файлов напрямую с использованием HFileOutputFormat) Мы должны использовать эту опцию,...
600 просмотров
schedule 12.09.2021

Могу ли я выполнить слияние ячеек в hbase?
Предположим, что у меня есть столбец, который обновляется постепенно, кроме перезаписи (например, побитовый целочисленный флаг или столбец суммы). Например (при условии только 1 версии): Существующая ячейка: [key: 'k1', f1: sum: 100] Новая...
390 просмотров
schedule 06.10.2021

Вставить данные из листа Excel с несколькими вкладками в SQL Server в несколько таблиц
Предположим, что есть 5 листов для 5 таблиц в SQL Server, как мне написать единый код для вставки массовых данных из этих 5 листов в 5 таблиц в SQL Server.
299 просмотров
schedule 11.11.2021

Данные загрузки MySQL - есть ли способ игнорировать первый столбец?
Я пытаюсь загрузить файл в таблицу mysql, используя LOAD DATA INFILE . Файл csv и таблица назначения имеют следующую структуру: Файл /data/data.csv ,col1,col2,col3 ,2101,val2,val3 Таблица col0ID = INT автономный col1 = INT col2...
28 просмотров
schedule 12.10.2021

Изменение значения часового пояса данных
Мне нужно импортировать в него данные без информации о часовом поясе (однако я знаю конкретный часовой пояс данных, которые я хочу импортировать), но мне нужен формат timestamp with time zone в базе данных. Как только я импортирую его и установлю...
6615 просмотров

Опция массовой загрузки, экспортирующая данные из R в Teradata с использованием RODBC
Я провел много исследований о том, как загружать огромные данные в .txt через R в Teradata DB. Я попытался использовать sqlSave() RODBC, но это не сработало. Я также ответил на некоторые другие подобные вопросы, например: Написать из R в Teradata...
1365 просмотров
schedule 07.03.2022

Elasticsearch: массовый запрос вызывает ошибку в Elasticsearch 6.1.1
Недавно я обновился до Elasticsearch версии 6.1.1, и теперь я не могу массово индексировать документы из файла JSON. Когда я делаю это встроенным, все работает нормально. Вот содержание документа: {"index" : {}} {"name": "Carlson Barnes", "age":...
25478 просмотров
schedule 13.03.2022

Невозможно выполнить массовую загрузку троек в виртуозный граф с помощью функций массовой загрузки
Я пытаюсь загрузить триплеты в Virtuoso с помощью функций массовой загрузки, упомянутых здесь: https://github.com/dbpedia/dbpedia-docs/wiki/Loading-Data-Virtuoso . Иногда массовая загрузка работает, иногда нет. Итак, вот что я сделал (я работаю...
526 просмотров

Получение учетных записей Salesforce с использованием rforce gem и массового API
Как получить несколько записей в Salesforce одним вызовом API через rforce gem? Кроме того, я знаю, что один вызов API может получить максимум 2000 записей, если количество моих записей> 2000 (скажем, 20000), как мне выполнить итерацию и выборку?
312 просмотров

Массовый импорт Neo4j для Windows
Я запускаю Neo4j 2.0.2 на сервере Windows 2012, и мне нужно быстро (в день) импортировать сотни миллионов узлов/отношений. Существуют ли какие-либо инструменты или процессы массового импорта, которые можно использовать в Windows? Я попытался...
549 просмотров
schedule 22.07.2022

Массовая загрузка в PostgreSQL с удаленного клиента
Мне нужно массово загрузить большой файл в PostgreSQL. Обычно я использую команду COPY, но этот файл нужно загрузить с удаленного клиентского компьютера. С MSSQL я могу установить локальные инструменты и использовать bcp.exe на клиенте для...
7107 просмотров
schedule 29.07.2022

sstableloader Кассандры - java.lang.OutOfMemoryError
Я попытался использовать массовую загрузку с помощью sstableloader и после «www.datastax.com/dev/blog/using-the-cassandra-bulk-loader-updated r» и «github.com/yukim/cassandra-bulkload-example/» . но получил ошибку при использовании sstableloader...
848 просмотров
schedule 01.09.2022

Массовая загрузка данных в sqlite?
Есть ли у кого-нибудь советы по утилитам, которые можно использовать для массовой загрузки данных, хранящихся в текстовых файлах с разделителями, в базу данных SQLite? В идеале что-то, что можно было бы вызвать как отдельную программу из сценария и...
25389 просмотров
schedule 15.12.2022

Самый эффективный способ массовой загрузки ненормализованного набора данных в PostgreSQL?
Я загрузил огромный набор данных CSV — отфильтрованные данные об использовании Eclipse, используя COPY PostgreSQL, и это занимает огромное количество места, потому что оно не нормализовано: три столбца TEXT гораздо эффективнее реорганизованы в...
639 просмотров

Выполнение массовой загрузки в cassandra с помощью map reduce
У меня нет большого опыта работы с кассандрой, поэтому, пожалуйста, извините меня, если я применил неправильный подход. Я пытаюсь выполнить массовую загрузку в кассандре с уменьшением карты В основном пример подсчета слов Ссылка:...
4236 просмотров

Могу ли я временно приостановить процесс массовой загрузки RDF на некоторое время, а затем возобновить его работу?
В настоящее время я массово загружаю дампы данных DBpedia и Freebase в виртуозную версию с открытым исходным кодом v7, используя процедуру rdf_loader_run(). База данных находится на нашем сервере, и у меня есть еще один граф IRI в Virtuoso,...
400 просмотров
schedule 01.07.2023

Массовая замена содержимого таблиц SQL Server
В моем приложении ASP.NET MVC есть несколько веб-серверов, обращающихся к базе данных SQL Server через Entity Framework 6. В базе данных есть 2 таблицы, между которыми существует отношение «один ко многим». Раз в день все содержимое обеих таблиц...
231 просмотров
schedule 27.11.2022

Выполнить команду COPY в удаленной базе данных, используя локальный файл
Я пытаюсь выполнить команду Postgres COPY . COPY warehouse_terminal.test_table FROM 'C:\file.csv' DELIMITERS E'\t' CSV HEADER QUOTE E'\"' ESCAPE E'\\' NULL AS ''; Проблема в том, что БД, где я собираюсь это использовать, удалена, а файл...
7742 просмотров