Вопросы по теме 'bulk-load'
С# - есть ли способ передать CSV-файл в базу данных?
Я видел много статей, в которых говорилось об использовании SqlBulkCopy для копирования содержимого из csv в базу данных, но всем им нужно загружать данные в таблицу данных или набор данных.
это не хорошо для меня, так как я имею дело с большим...
3000 просмотров
schedule
27.06.2023
SQL Server 2008 BULK INSERT вызывает больше операций чтения, чем операций записи. Почему?
У меня огромная таблица (несколько миллиардов строк) с кластеризованным индексом и двумя некластеризованными индексами.
Операция BULK INSERT производит 112000 чтений и только 383 записи (длительность 19948 мс).
Меня это очень сбивает с толку....
1047 просмотров
schedule
15.08.2022
При программном создании и загрузке HFile в HBase новые записи недоступны
Я пытаюсь программно создать HFiles и загрузить их в работающий экземпляр HBase. Я нашел много информации в HFileOutputFormat и LoadIncrementalHFiles
Мне удалось создать новый HFile, отправить его в кластер. В веб-интерфейсе кластера...
3836 просмотров
schedule
27.02.2023
массовая вставка и разбор сложного XML-файла в несколько таблиц
У меня есть следующая хранимая процедура sql для массовой вставки и анализа файла xml и вставки его данных в несколько таблиц в базе данных.
Приведенный ниже sql работает, однако он вставляет повторяющиеся записи в таблицу #questions и таблицу...
2686 просмотров
schedule
14.04.2023
Массовая загрузка невозможна, поскольку файл не может быть открыт. Код ошибки операционной системы 3
Я пытаюсь настроить хранимую процедуру как задание агента SQL Server, и это дает мне следующую ошибку:
Не удалось выполнить массовую загрузку, поскольку не удалось открыть файл «P: \ file.csv». Код ошибки операционной системы 3 (не удалось...
180005 просмотров
schedule
09.12.2022
В чем разница между отключением и повторным включением индекса по сравнению с его удалением и повторным созданием?
Как говорится в вопросе, в чем разница между ними с точки зрения производительности и что лучше для каких сценариев?
Или эти два имеют тот же эффект? Каковы будут плюсы и минусы каждого из них, если он применим?
Насколько я понимаю, воссоздание...
5848 просмотров
schedule
19.06.2022
Импорт данных из CSV-файлов в Cratedb
Я создал таблицу в Crate 0.38.x со столбцами, имеющими типы данных integer, string и timestamp. Я хочу загрузить данные в эту таблицу из текстовых файлов с разделителями. Есть ли утилита для массового импорта? Извините, но я не смог найти ни в...
1145 просмотров
schedule
17.08.2022
Фрагментированная массовая загрузка XML в SQL Server на C#
У меня есть XML, содержащий информацию, полученную в результате сканирования систем в разных доменах. XML соответствует таблицам в базе данных, которые вложены следующим образом:
Domains
Computers
Volumes
Folders...
962 просмотров
schedule
20.08.2022
Как использовать класс HFileOutputFormat HBase со Spark JavaPairRDD.saveAsNewAPIHadoopDataset?
Я пытаюсь загрузить содержимое Spark JavaPairRDD в таблицу HBase.
Кажется, что использование JavaPairRDD.saveAsNewAPIHadoopDataSet с HFileOutputFormat — правильный путь.
Есть ли пример кода для этого?
2846 просмотров
schedule
01.04.2024
Как импортировать 1 миллион строк в формате .csv в MySQL workbench 6.2 ce
Как я могу импортировать 1 миллион или более данных (формат .csv) в MySQL Workbench? Импортировать небольшие объемы данных легко, но я не могу хранить что-то большее, чем 1 миллион данных. Данные находятся в таблице с 15 столбцами и 0,4 миллионами...
1559 просмотров
schedule
29.03.2023
Массовая загрузка дочерних объектов NHibernate для нескольких родителей
Допустим, у нас есть таблица категорий и таблица продуктов. И каждый продукт ссылается на категорию. Таким образом, в каждой категории есть много продуктов. Я хочу загрузить много категорий без продуктов (чтобы уменьшить время доступа к БД), затем...
1034 просмотров
schedule
16.03.2023
Самый быстрый способ переместить данные из одной таблицы в другую в Postgres
Справочная информация
На моем сервере Postgres у меня есть несколько таблиц, к которым постоянно обращаются приложения бизнес-аналитики, поэтому в идеале они должны оставаться доступными большую часть времени. Таблицы очищаются и перезагружаются...
1923 просмотров
schedule
09.05.2022
Почему BULK INSERT/BCP включает оператор Sort, хотя я сделал все, чтобы этого избежать? (SQL сервер 2012)
У меня проблема с процессом BULK INSERT/BCP, который включает оператор сортировки, хотя я сделал все, чтобы этого избежать. Во-первых, я экспортировал данные в файл с BCP (собственный формат), используя запрос и с предложением «ORDER BY Id ASC,...
1034 просмотров
schedule
13.07.2022
Создание графика в титане из данных в csv - пример wiki.Vote выдает ошибку
Я новичок в Титане - я загрузил титан и успешно запустил пример GraphOfTheGods, включая заданные запросы. Затем я попытался выполнить массовую загрузку CSV-файла для создания графика и выполнил шаги в степенях десяти — часть 1...
327 просмотров
schedule
25.05.2022
Как массово импортировать документы с пользовательскими метаданными из CSV в репозиторий Alfresco?
У меня есть файл excel (или csv), содержащий список документов с их свойствами и абсолютными путями на локальном жестком диске. Теперь мы собираемся использовать Alfresco (v5.0.d) как DMS, я уже создал пользовательский аспект, который отражает поля...
903 просмотров
schedule
14.02.2023
Файл чтения SQL, ошибка отказа в доступе
У меня есть следующая процедура SQL:
DECLARE @stament as nvarchar(max)
set @stament='SELECT BulkColumn FROM OPENROWSET (BULK '''+ @Path+''', SINGLE_BLOB) MyFile '
EXECUTE sp_executesql @stament
когда я его выполняю, возникает...
2129 просмотров
schedule
07.06.2022
что такое @param в массовой загрузке elasticsearch
Я следую инструкциям на https://www.elastic.co/guide/en/kibana/current/getting-started.html
Я скачал примеры файлов JSON и поместил их в /mydirectory/data/accounts.json.
согласно документации, вы должны ввести curl -XPOST...
211 просмотров
schedule
17.06.2023
Создание XML-схемы для массовой загрузки в SQL Server — дочерний элемент описывает родительский
У меня есть документ XML, для которого я работаю над созданием схемы, чтобы массово загружать эти документы в таблицу SQL Server. XML, на котором я сосредоточусь, выглядит так:
<Coverage>
<CoverageCd>BI</CoverageCd>...
135 просмотров
schedule
03.08.2022
массовая вставка SQL-сервера
При использовании команды массовой вставки T-SQL из SQL Server Management Stuidio я случайно получаю эту ошибку. Не каждый раз. Иногда это работало бы совершенно нормально, а иногда выдавало мне следующую ошибку.
Ошибка: не удается выполнить...
491 просмотров
schedule
07.06.2023
Как выполнить массовую загрузку в мангусте (node.js)
Я пытаюсь выполнить массовую загрузку в node js, и mongodb — это моя база данных, может ли кто-нибудь предложить мне несколько лучших статей по этому поводу. Заранее спасибо.
1739 просмотров
schedule
22.09.2022
